GH-94736: Fix _multiprocessing.SemLock subclassing (#94738)

* fix allocator and deallocator

* 📜🤖 Added by blurb_it.

* code review

Co-authored-by: blurb-it[bot] <43283697+blurb-it[bot]@users.noreply.github.com>

gh-93883: Fix some tests involving traceback formatting (#94737)

PR #93994 was merged without being rebased in a few weeks, and
some new test code using the old scheme passed through automatic merge.

gh-87822: Make traceback module robust to exceptions from repr() of local values (GH-94691)

gh-93883: elide traceback indicators when possible (#93994)

* gh-93883: elide traceback indicators when possible

Elide traceback column indicators when the entire line of the
frame is implicated.  This reduces traceback length and draws
even more attention to the remaining (very relevant) indicators.

Example:
```
Traceback (most recent call last):
  File "query.py", line 99, in <module>
    bar()
  File "query.py", line 66, in bar
    foo()
  File "query.py", line 37, in foo
    magic_arithmetic('foo')
  File "query.py", line 18, in magic_arithmetic
    return add_counts(x) / 25
           ^^^^^^^^^^^^^
  File "query.py", line 24, in add_counts
    return 25 + query_user(user1) + query_user(user2)
                ^^^^^^^^^^^^^^^^^
  File "query.py", line 32, in query_user
    return 1 + query_count(db, response['a']['b']['c']['user'], retry=True)
                               ~~~~~~~~~~~~~~~~~~^^^^^
TypeError: 'NoneType' object is not subscriptable
```

Rather than going out of our way to provide indicator coverage
in every traceback test suite, the indicator test suite should
be responible for sufficient coverage (e.g. by adding a basic
exception group test to ensure that margin strings are covered).

Small speed-up for NormalDist.samples (GH-94730)

gh-94309: Deprecate typing.Hashable/Sized (GH-94626)

Deprecate typing.Hashable/Sized. Use the collections.abc counterparts directly instead.

To be consistent with PEP 585, deprecated aliases will not raise any DeprecationWarning.

GH-77265: Document NaN handling in statistics functions that sort or count (#94676)

* Document NaN handling in functions that sort or count

* Update Doc/library/statistics.rst

Co-authored-by: Erlend Egeberg Aasland <erlend.aasland@protonmail.com>
* Update Doc/library/statistics.rst

Co-authored-by: Erlend Egeberg Aasland <erlend.aasland@protonmail.com>
* Fix trailing whitespace and rewrap text

Co-authored-by: Erlend Egeberg Aasland <erlend.aasland@protonmail.com>

GH-94694: Fix column offsets for multi-line method lookups (GH-94697)

Improve dataclass docstring (gh-94686)

gh-94637: Release GIL in SSLContext.set_default_verify_paths (GH-94658)

pycore_interp.h: Fix comment about pytypedefs.h (#93188)

GH-31527 moved this typedef to `Include/pytypedefs.h`, so this comment
should point at the correct location

gh-93649: Fix dependencies of _testcapi (#94695)

- header files are located in $(srcdir)
- dependencies must not list C files that are also in a makesetup Setup file
- generate SRCDIRS for OOT builds

gh-94700: Rewrite the logging.Formatter API ref in structured form (GH-94701)

gh-94607: Fix subclassing generics (GH-94610)

Co-authored-by: Serhiy Storchaka <3659035+serhiy-storchaka@users.noreply.github.com>

GH-93252: Fix error handling for failed Python calls (GH-94693)

Increase test coverage of Objects/exceptions.c (GH-94674)

GH-90699: Intern statically allocated strings (GH-93597)

This is similar to how strings are interned for deepfreeze.

gh-93649: Split vectorcall testing from _testcapimodule.c (GH-94549)

The `_testcapimodule.c` file is getting too large to work with effectively.
This PR lays out a general structure of how tests can be split up, with more splitting to come later if the structure is OK.

Vectorcall tests aren't the biggest issue -- it's just an area I want to work on next, so I'm starting here.
An issue specific to vectorcall tests is that it wasn't clear that e.g. `MethodDescriptor2` is related to testing vectorcall: the `/* Test PEP 590 */` section had an ambiguous end. Separate file should make things like this much clearer.
OTOH, for some pieces it might not be clear where they should be -- I left `meth_fastcall` with tests of the other calling conventions. IMO, even with the ambiguity it's still worth it to split the huge file up.

I'm not sure about the buildsystem changes, hopefully CI will tell me what's wrong.

@vstinner, @markshannon: Do you think this is a good idea?

Automerge-Triggered-By: GH:encukou

Use mdash-es consistently in the library docs index (#92762)

gh-94199: Remove the ssl.wrap_socket() function (#94203)

Remove the ssl.wrap_socket() function, deprecated in Python 3.7:
instead, create a ssl.SSLContext object and call its
sl.SSLContext.wrap_socket() method. Any package that still uses
ssl.wrap_socket() is broken and insecure. The function neither sends
a SNI TLS extension nor validates server hostname. Code is subject to
CWE-295 : Improper Certificate Validation.

gh-94215: Fix error handling for line-tracing events (GH-94681)

* Re-enable crasher
* Fix error handling for line-tracing events
* blurb add

gh-94622: Add more references to the sqlite3 types anchor (#94623)

gh-94321: Document sqlite3.PrepareProtocol (#94620)

GH-90699: Move generated static initializer to pycore_runtime_generated.h (GH-94051)

gh-93654: Add module docstring to pathlib (GH-94611)

Issue: gh-93654

gh-94343: Ease initialization of reprlib.Repr attributes (GH-94581)

gh-94642: Remove -D_XOPEN_SOURCE from more pkg-config CFLAGS (#94657)

Some pkg-config pc files define CFLAGS with -D_XOPEN_SOURCE=600. We always want _XOPEN_SOURCE=700.

gh-93910: Fix enum performance regression (GH-94614)

This removes the performance regression in 3.11, **at the expense of not fixing
the "bug" that allows accessing values from values** (e.g. `Color.RED.BLUE`).

Using the benchmark @markshannon [presented](https://github.com/python/cpython/issues/93910#issuecomment-1165503032), the results are:

| Version | Enum | Fast enum | Normal class |
| --- | --- | --- | --- |
| 3.10 | 2.04 | 0.59 | 0.56 |
| 3.11 | 2.78 | 0.31 | 0.15 |
| This PR | 1.30 | 0.32 | 0.16 |

I share this mostly as information about the source of the regression, as this may be useful. It may be that the lower-risk approach for the beta is just to revert to a previously-known working state.

GH-94644: fix test_curses ref leak (GH-94647)

gh-94644: Define HAVE_NCURSESW in pkg-config branch (#94651)

gh-94215: Add reproducer for segfault in frame_setlineno() (GH-94563)

gh-94430: Allow params named `module` or `self` with custom C names in Argument Clinic (#94431)

gh-94628: Add explicit parameter list to sqlite3.connect docs (#94629)

Co-authored-by: CAM Gerlach <CAM.Gerlach@Gerlach.CAM>

gh-92228: disable the compiler's 'small exit block inlining' optimization for blocks that have a line number (GH-94592)

Inlining of code that corresponds to source code lines, can make it hard to distinguish later between code which is only reachable from except handlers, and that which is reachable in normal control flow. This caused problems with the debugger's jump feature.

This PR turns off the inlining optimisation for code which has line numbers. We still inline things like the implicit "return None".

gh-94630: Update sqlite3 docs with positional-only and keyword-only symbols (#94631)

gh-94017: Improve clarity of sqlite3 transaction handling docs (#94320)

Co-authored-by: Alex Waygood <Alex.Waygood@Gmail.com>
Co-authored-by: CAM Gerlach <CAM.Gerlach@Gerlach.CAM>

GH-93896: AAlways set event loop in asyncio.run and IsolatedAsyncioTestCase (#94593)

gh-90005: Port readline and curses to PY_STDLIB_MOD (GH-94452)

Co-authored-by: Erlend Egeberg Aasland <erlend.aasland@protonmail.com>

gh-94438: in frameobject's mark_stacks switch, the PUSH_EXC_INFO and POP_EXCEPT cases are no longer reachable (GH-94582)

gh-94510: Raise on re-entrant calls to sys.setprofile and sys.settrace (GH-94511)

Co-authored-by: Łukasz Langa <lukasz@langa.pl>

gh-91330: Tests and docs for dataclass descriptor-typed fields (GH-94424)

Co-authored-by: Łukasz Langa <lukasz@langa.pl>

gh-94360: Fix a tokenizer crash when reading encoded files with syntax errors from stdin (#94386)

* gh-94360: Fix a tokenizer crash when reading encoded files with syntax errors from stdin

Signed-off-by: Pablo Galindo <pablogsal@gmail.com>
* nitty nit

Co-authored-by: Łukasz Langa <lukasz@langa.pl>

gh-90355: Add isolated flag if currently isolated (GH-92857)

Co-authored-by: Éric <merwok@netwok.org>
Co-authored-by: Łukasz Langa <lukasz@langa.pl>

gh-92897: Ensure `venv --copies` respects source build property of the creating interpreter (GH-92899)

Docs: Convert PEP 630 (Isolating Extension Modules) to a HOWTO (GH-94489)

Co-authored-by: Stanley <46876382+slateny@users.noreply.github.com>
Co-authored-by: Alex Waygood <Alex.Waygood@Gmail.com>

bpo-46755: Don't log stack info twice in QueueHandler (GH-31355)

gh-94485: Set line number of module's RESUME instruction to 0, as specified by PEP 626 (GH-94552)

Co-authored-by: Mark Shannon <mark@hotpy.org>

gh-84753: Clarify change made to `inspect` functions (#94554)

gh-94379: Remove zipimport find_loader() and find_module() methods (#94380)

zipimport: Remove find_loader() and find_module() methods, deprecated
in Python 3.10: use the find_spec() method instead. See PEP 451 for
the rationale.

Docs: remove redundant "adverb-adjective" hyphens from compound modifiers (GH-94551)

Discussion: https://discuss.python.org/t/slight-grammar-fix-throughout-adverbs-dont-need-hyphen/17021

gh-94538: Fix Argument Clinic output to custom file (#94539)

gh-93626: Set the release for `__future__.annotations` to `None` (GH-93628)

Co-authored-by: Guido van Rossum <gvanrossum@gmail.com>

gh-93939: Add script to check extension modules (#94545)

Add script ``Tools/scripts/check_modules.py`` to check and validate builtin
and shared extension modules. The script also handles ``Modules/Setup`` and
will eventually replace ``setup.py``.

Co-authored-by: Victor Stinner <vstinner@python.org>
Co-authored-by: Erlend Egeberg Aasland <erlend.aasland@protonmail.com>

gh-94383: Remove ElementTree.Element.copy() method (#94384)

xml.etree: Remove the ElementTree.Element.copy() method of the pure
Python implementation, deprecated in Python 3.10, use the copy.copy()
function instead. The C implementation of xml.etree has no copy()
method, only a __copy__() method.

gh-94352: shlex.split() no longer accepts None (#94353)

shlex.split(): Passing None for s argument now raises an exception,
rather than reading sys.stdin. The feature was deprecated in Python
3.9.

gh-94512: Fix forced arg format in AC-processed multiprocessing (GH-94517)

gh-94512: Fix forced arg format in AC-processed winreg (GH-94513)

gh-94512: Fix forced arg format in AC-processed msvcrtmodule (GH-94514)

Update logging documentation: change cross-reference and add webapp r… (GH-94540)

gh-93963: Officially deprecate abcs and warn about their usage. (GH-93965)

Fixes #93963

Automerge-Triggered-By: GH:jaraco

gh-92869: ctypes: Add c_time_t (#92870)

Adds `ctypes.c_time_t` to represent the C `time_t` type accurately as its size varies.

Primarily-authored-by: Adam Turner <9087854+AA-Turner@users.noreply.github.com>
Co-authored-by: Gregory P. Smith <greg@krypto.org> [Google]

IDLE doc: Tweek RESTART and Windows console start (#94530)

gh-93096: Remove `python -m base64 -t` (gh-94230)

Doc: fix sqlite3 blob reference anchor (#94505)

gh-94393: Remove unneeded module state from _json (#94394)

gh-93096: Remove `python -m codecs` (gh-94233)

gh-90005: Port _dbm module to PY_STDLIB_MOD (GH-94433)

gh-81054: Document that SimpleHTTPRequestHandler follows symbolic links (GH-94416)

Update code sample when importing modules in queue doc (GH-94244)

In the queue documentation, the code snippet shows the import to be not PEP 8 compliant.

Since people typically copy-paste from such code samples, I think it's important to show best-practices here.

gh-75372: Specify major version in README for installation (GH-92759)

gh-94216: add pseudo instructions to the dis/opcodes modules (GH-94241)

GH-94438: Account for NULLs on evaluation stack when jumping lines. (GH-94444)

Remove pr trigger from project-updater GHA. (#94483)

GH-94262: Don't create frame objects for frames that aren't yet complete. (GH-94371)

gh-84461: Tool/wasm/python.html: Add subresource integrity hashes (#93953)

gh-84461: Improve WebAssembly in-browser demo (#91879)

* Buffer standard input line-by-line

* Add non-root .editorconfig for JS & HTML indent

* Add support for clearing REPL with CTRL+L

* Support unicode in stdout and stderr

* Remove \r\n normalization

* Note that local .editorconfig file extends root

* Only normalize lone \r characters (convert to \n)

* Skip non-printable characters in buffered input

* Fix Safari bug (regex lookbehind not supported)

Co-authored-by: Christian Heimes <christian@python.org>

Add a workflow to add issues/PRs to projects. (#94447)

* Add a workflow to add issues/PRs to projects.

* Apply suggestions from code review

Co-authored-by: CAM Gerlach <CAM.Gerlach@Gerlach.CAM>
Co-authored-by: CAM Gerlach <CAM.Gerlach@Gerlach.CAM>

gh-90005-ffi: Fix building _ctypes without pkg-config (GH-94451)

The fallback path did not set LIBFFI_LIBS variable to link with ``-lffi``.

multiprocessing.spawn doc: Capitalize the p in "Python" (gh-94462)

GH-94398: TaskGroup: Fail create_task() during shutdown (GH-94400)

Once the task group is shutting down, it should not be possible to create a new task.
Here "shutting down" means `self._aborting` is set, indicating that at least one task
has failed and we have cancelled all others.

Co-authored-by: Łukasz Langa <lukasz@langa.pl>

gh-84753: Make inspect.iscoroutinefunction() work with AsyncMock (#94050)

The inspect version was not working with unittest.mock.AsyncMock.

The fix introduces special-casing of AsyncMock in
`inspect.iscoroutinefunction` equivalent to the one
performed in `asyncio.iscoroutinefunction`.

Co-authored-by: Łukasz Langa <lukasz@langa.pl>

xml.dom.minidom docs: fix typo (#93437)

GH-90908: Document asyncio.TaskGroup (GH-94359)

Co-authored-by: CAM Gerlach <CAM.Gerlach@Gerlach.CAM>

gh-93491: Fix PEP 11 tier detection for FreeBSD (GH-94441)

gh-91719: Reload opcode on unknown error so that C can optimize the dispatching in ceval.c (#94364)

gh-89038: [doc] update dis.findlinestarts documentation for changes related to PEP-626 (GH-94247)

GH-94329: Don't raise on excessive stack consumption (GH-94421)

Delete DOS-only PC/testpy.py (GH-94419)

gh-94332: make it safe to call assemble_free when assemble_init has not been called (GH-94389)

gh-92336: linecache.getline should not raise exceptions on decoding errors (GH-94410)

bpo-92336: [doc] clarify that the dfile is read by the traceback display code (GH-94409)

Docs: Update SyntaxError message in REPL example for list comprehension (GH-93901)

gh-94401: Remove unneeded bz2 module state (#94402)

Delete unused PC/empty.c (GH-94418)

gh-94404: Use module CFLAGS before PY_STDMODULE_CFLAGS (GH-94413)

``PY_STDMODULE_CFLAGS`` may contain include directories with system
headers. This can break compiling with built-in libmpdec.

gh-94401: Remove unneeded overlapped module state (#94403)

gh-86404: [doc] Two 'make suspicious' false positives. (GH-94407)

gh-94026: Buffer regrtest worker stdout in temporary file (GH-94253)

Co-authored-by: Victor Stinner <vstinner@python.org>

gh-94404: makesetup: use correct CFLAGS and macOS workaround (GH-94405)

``makesetup`` now works around an issue with sed on macOS and uses correct
CFLAGS for object files that end up in a shared extension.

gh-94395: Remove unneeded module state from mmap (#94396)