gh-131015: Add test for bytes formatting errors (#131881)

Co-authored-by: Bénédikt Tran <10796600+picnixz@users.noreply.github.com>

gh-131912: Improve description of grouping options in the format specification docs (#132030)

Co-authored-by: Bénédikt Tran <10796600+picnixz@users.noreply.github.com>

gh-129463, gh-128593: Simplify ForwardRef (#129465)

gh-109599: Expose `CapsuleType` via the `_types` module (#131969)

gh-131933: Document UnionType/Union merger in What's New (#131941)

Co-authored-by: Alex Waygood
Co-authored-by: Bénédikt Tran <10796600+picnixz@users.noreply.github.com>

Fix typo in `template_replace()` test helper docstring (#132094)

gh-100239: fix bug in comparison (#132093)

gh-99108: Implement HACL* HMAC (#130157)

A new extension module, `_hmac`, now exposes the HACL* HMAC (formally verified) implementation.

The HACL* implementation is used as a fallback implementation when the OpenSSL implementation of HMAC
is not available or disabled. For now, only named hash algorithms are recognized and SIMD support provided
by HACL* for the BLAKE2 hash functions is not yet used.

GH-131498: Cases generator: manage stacks automatically (GH-132074)

gh-118761: Lazily import annotationlib in typing (#132060)

annotationlib is used quite a few times in typing.py, but I think the
usages are just rare enough that this makes sense.

The import would get triggered by:
- Using get_type_hints(), evaluate_forward_ref(), and similar introspection
  functions
- Using a string annotation anywhere that goes through _type_convert (e.g.,
  "Final['x']" will trigger an annotationlib import in order to access the
  ForwardRef class).
- Creating a TypedDict or NamedTuple (unless it's empty or PEP 563 is on).

Lots of programs will want to use typing without any of these, so the tradeoff
seems worth it.

gh-131938: Update exception message for `Element.remove()` when an element is not found (#131972)

The exception message for `xml.etree.ElementTree.Element.remove` when an element is not found
has been updated from "list.remove(x): x not in list" to "Element.remove(x): element not found".

gh-100239: more refined specialisation stats for BINARY_OP/SUBSCR (#132068)

gh-130115: fix thread identifiers for 32-bit musl (#130391)

CPython's pthread-based thread identifier relies on pthread_t being able
to be represented as an unsigned integer type.

This is true in most Linux libc implementations where it's defined as an
unsigned long, however musl typedefs it as a struct *.

If the pointer has the high bit set and is cast to PyThread_ident_t, the
resultant value can be sign-extended [0]. This can cause issues when
comparing against threading._MainThread's identifier. The main thread's
identifier value is retrieved via _get_main_thread_ident which is backed
by an unsigned long which truncates sign extended bits.

  >>> hex(threading.main_thread().ident)
  '0xb6f33f3c'
  >>> hex(threading.current_thread().ident)
  '0xffffffffb6f33f3c'

Work around this by conditionally compiling in some code for non-glibc
based Linux platforms that are at risk of sign-extension to return a
PyLong based on the main thread's unsigned long thread identifier if the
current thread is the main thread.

[0]: https://gcc.gnu.org/onlinedocs/gcc-14.2.0/gcc/Arrays-and-pointers-implementation.html

---------

Signed-off-by: Vincent Fazio <vfazio@gmail.com>

gh-132075: Fix possible use of sockaddr structures with uninitialized members (GH-132076)

Now all structure members are initialized with zeroes by default.

gh-118761: Defer import of functools in annotationlib (#132059)

gh-130655: Add a test for corrupt `.mo` files in `gettext` (#131911)

gh-130655: Add a test for bad magic numbers in `.mo` files parsed by `gettext` (#131909)

gh-128632: fix segfault on nested __classdict__ type param (#128744)

gh-105499: Defer "import warnings" in typing (#132061)

A bunch of other warnings in typing.py were already deferred, but
I added a few non-lazy ones.

GH-131288: Use `_AddressOfReturnAddress` for MSVC in pycore_ceval.h (gh-131289)

Use `_AddressOfReturnAddress` in `_Py_get_machine_stack_pointer` to silence MSVC warning in pycore_ceval.h for release builds.

gh-125434: Display thread name in faulthandler (#132016)

Add tests for Bluetooth RFCOMM, HCI and SCO (GH-132023)

GH-131770: increase assumed WASI stack size to 131072 (wasi-sdk default) (#131844)

https://github.com/WebAssembly/wasi-libc/blob/e9524a0980b9bb6bb92e87a41ed1055bdda5bb86/libc-top-half/musl/src/internal/pthread_impl.h#L220

Signed-off-by: Filipe Laíns <lains@riseup.net>

Enable Windows on Arm GitHub runners (#131994)

gh-132038: Make perf version check in test_perf_profiler more robust (#132039)

Should work also if the version string includes a commit hash, like `perf version 6.12.9.g242e6068fd5c`

gh-128661: Remove DeprecationWarning in evaluate_forward_ref (#128930)

It doesn't make sense to use a deprecation for evaluate_forward_ref,
as it is a new function in Python 3.14 and doesn't have compatibility
guarantees.

I considered making it throw an error if type_params it not passed and
there is no owner. However, I think this is too unfriendly for users. The
case where this param is really needed is fairly esoteric and I don't think
this case is worth the pain of forcing users to write "type_params=()".

gh-131423: Update OpenSSL build tag to 3.0.16.2 to fix ARM64 crash (GH-132051)

gh-131591: Implement PEP 768 (#131937)

Co-authored-by: Ivona Stojanovic <stojanovic.i@hotmail.com>
Co-authored-by: Matt Wozniski <godlygeek@gmail.com>

GH-131904: Fix Py_STACKREF_DEBUG build (GH-132022)

Remove deferred ``typing`` import in ``annotationlib`` (#132034)

gh-60115: Support frozen modules for linecache.getline() (#131638)

gh-118761: Fix star-import of ast (#132025)

Co-authored-by: Adam Turner <9087854+AA-Turner@users.noreply.github.com>

gh-111178: Skip test_perf_profiler on function sanitizer (#132020)

Add 'function' parameter to check_sanitizer() of test.support.

gh-118761: Optimise import time for ast (#131953)

GH-131498: Cases generator: Parse down to C statement level. (GH-131948)

* Parse down to statement level in the cases generator

* Add handling for #if macros, treating them much like normal ifs.

gh-131974: Fix usages of `locked_deref` in `ctypes` (#131975)

gh-131544: Update docs for PyType_AddWatcher (gh-132015)

gh-59705: Fix solaris detection in test_threading.test_set_name() (#132012)

gh-132013: use relaxed atomics in hash of frozenset (#132014)

Use relaxed atomics in hash of `frozenset` to fix TSAN warning.

gh-131888: fix ResourceWarning in test_ftplib (#131889)

gh-132002: Fix crash of `ContextVar` on unhashable `str` subtype (#132003)

gh-130197: pygettext: Test the --escape option (GH-131902)

GH-128055: fix test_sysconfigdata_json outside the builddir (#128070)

GH-131726: Split up _CHECK_VALIDITY_AND_SET_IP (GH-131810)

GH-131798: Allow the JIT to remove more int/float/str guards (GH-131800)

gh-131987: Bump the magic number (#131991)

This should have been done as part of 053c285 but got blown away
in a merge.

gh-131831: Implement PEP 758 – Allow except and except* expressions without parentheses (#131833)

gh-130704: Strength reduce `LOAD_FAST{_LOAD_FAST}` (#130708)

Optimize `LOAD_FAST` opcodes into faster versions that load borrowed references onto the operand stack when we can prove that the lifetime of the local outlives the lifetime of the temporary that is loaded onto the stack.

GH-131296: Disable MSVC-specific optimization in sre.c when compiling with clang-cl (GH-131593)

gh-111178: remove redundant casts for functions with correct signatures (#131673)

gh-111178: Fix getsockaddrarg() undefined behavior (#131668)

Don't pass direct references to sockaddr members since their type may
not match PyArg_ParseTuple() types. Instead, use temporary 'int' and
'unsigned char' variables, and update sockaddr members afterwards.

On FreeBSD, treat BTPROTO_HCI node name as a bytes string,
not as an integer.

gh-131736: only apply `security_level` workaround in `test_ssl` for security levels greater than 1 (#131739)

Minor improvements to the programming FAQ (#127261)

Co-authored-by: Adam Turner <9087854+AA-Turner@users.noreply.github.com>

gh-121249: Note struct module changes in What's New (#131867)

Co-authored-by: Adam Turner <9087854+AA-Turner@users.noreply.github.com>

 gh-125957: sync argument naming in sphinx docs of the cmath and help() (#125958)

Co-authored-by: Bénédikt Tran <10796600+picnixz@users.noreply.github.com>

gh-131531: Add `android.py package` command (#131532)

Adds a `package` entry point to the `android.py` build script to support
creating an Android distribution artefact.

gh-129917: Update installers to use SQLite 3.49.1 (#131025)

Co-authored-by: Ned Deily <nad@python.org>

GH-131296: Add missing UNREACHABLE mark in thread_nt.h (GH-131589)

gh-131675: Fix `mi_atomic_yield` in mimalloc on 32-bit ARM (gh-131784)

Use the standard `__ARM_ARCH` macro, which is supported by GCC and Clang.

The branching logic for of `__ARMEL__` has been removed so if the target
architecture supports v7+ instructions, a yield is emitted, otherwise a nop
is emitted. This covers both big and little endian scenarios.

Signed-off-by: Vincent Fazio <vfazio@gmail.com>

gh-131865: Properly apply exported CFLAGS for dtrace/systemtap builds (#131866)

When using --with-dtrace the resulting object file could be missing
specific CFLAGS exported by the build system due to the systemtap
script using specific defaults.

Exporting the CC and CFLAGS variables before the dtrace invocation
allows us to properly apply CFLAGS exported by the build system
even when cross-compiling.

The fix does not affect the dtrace invocation on Solaris/macOS.

gh-107369: Optimise ``textwrap.indent()`` (#131923)

Co-authored-by: Bénédikt Tran <10796600+picnixz@users.noreply.github.com>

gh-131936: Strengthen check in `_suggestions._generate_suggestions` (#131945)

gh-105499: typing: Remove an unused function (#131946)

Leftover from #105511 I believe. GitHub code search found no usages other
than copies of typing.py and lists of stdlib functions.

GH-131296: Fix incompatible pointer type warning in _winapi.c (GH-131600)

GH-131296: Fix clang-cl warnings on Windows in sqlite3 (GH-131906)

GH-131296: Fix parenthesis warnings on Windows-specific code (GH-131905)

GH-131296: Fix clang-cl warning on Windows in liblzma (GH-131897)

Also removes warnings suppression for MSVC that no longer need to be suppressed.

Fix PEP number in `ast_opt.c` for new `finally` check (#131928)

gh-131525: Remove `_HashedSeq` wrapper from `lru_cache` (gh-131922)

GH-131498: Another refactoring of the code generator (GH-131827)

* Rename 'defined' attribute to 'in_local' to more accurately reflect how it is used

* Make death of variables explicit even for array variables.

* Convert in_memory from boolean to stack offset

* Don't apply liveness analyis to optimizer generated code

* Add 'out' parameter to stack.pop

gh-130843: expose 48-bit timestamp for UUIDv7 (#131838)

gh-126033: fix UAF in `xml.etree.ElementTree.Element.remove` when concurrent mutations happen (#126124)

gh-126037:  fix UAF in `xml.etree.ElementTree.Element.find*` when concurrent mutations happen (#127964)

We fix a use-after-free in the `find`, `findtext` and `findall` methods of `xml.etree.ElementTree.Element`
objects that can be triggered when the tag to find implements an `__eq__` method that mutates the
element being queried.

gh-130167: Optimise ``textwrap.dedent()`` (#131919)

Co-authored-by: Marius Juston <marius.juston@hotmail.fr>
Co-authored-by: Pieter Eendebak <pieter.eendebak@gmail.com>
Co-authored-by: Bénédikt Tran <10796600+picnixz@users.noreply.github.com>

GH-131798: Remove type checks for _TO_BOOL_STR (GH-131816)

gh-131895: fix clang `$PATH` on Darwin runners for tail-calling interpreter (#131903)

Update cryptographic CODEOWNERS entry (#131892)

update cryptographic CODEOWNERS entry

gh-127794: Validate email header names according to RFC 5322 (#127820)

`email.message.Message` objects now validate header names specified via `__setitem__`
or `add_header` according to RFC 5322, §2.2 [1].

In particular, callers should expect a ValueError to be raised for invalid header names.

[1]: https://datatracker.ietf.org/doc/html/rfc5322#section-2.2

---------

Co-authored-by: Bénédikt Tran <10796600+picnixz@users.noreply.github.com>
Co-authored-by: R. David Murray <rdmurray@bitdance.com>

gh-131178: Update help message for `timeit` CLI (#131326)

gh-127945: mark `TestLocalization` as thread unsafe in ctypes (#131899)

gh-127945: acquire critical section around `PyCFuncPtr_call` (#131898)

gh-127945: make initialization of `error_object_name` thread safe in ctypes (#131896)

gh-127945: fix thread safety of creating instances of ctypes structures (#131716)

gh-131885: Document that `dict.setdefault` and `dict.get` take no keyword arguments (#128208)

gh-129994: update docs when using `dualstack_ipv6` in `socket.create_server` (#129996)

GH-129149: Add fast path for medium-sized integers in `PyLong_From*` functions (#131211)

Add a fast path for medium-sized integers in `PyLong_FromInt{32,64}` and `PyLong_FromUInt{32,64}`.

gh-130924: Do not create cells for usages of names in local annotations (#131843)

gh-131853: Fix test_msgfmt on big-endian platforms (GH-131879)

Use a generated .mo file instead of a checked in one.

gh-131853: Test binary header in msgfmt generated file (GH-131854)

gh-131050: skip `test_dh_params` when TLS library lacks FFDHE ciphersuites (#131051)

Co-authored-by: Bénédikt Tran <10796600+picnixz@users.noreply.github.com>

gh-127541: Update os.walk example (GH-127765)

Update os.walk example to be more modern, skip `__pycache__` dirs rather than `CVS` dirs.

Co-authored-by: Bénédikt Tran <10796600+picnixz@users.noreply.github.com>

gh-131740: minor readability fix in PyUnstable_GC_VisitObjects (gh-131786)

Minor readability fix in PyUnstable_GC_VisitObjects

Replaces `if (visit_generation())` with `if (visit_generation() < 0)`,
since we are checking for the failure case, and it's confusing to have
that be implicitly `true`.

Also fixes a misspelt variable name.

gh-130373: Avoid locking in _LOAD_ATTR_WITH_HINT (#130372)

Avoid locking in _LOAD_ATTR_WITH_HINT

docs: -I also implies -P (#131539)

gh-131423: Update to OpenSSL 3.0.16. (GH-131839)

The bin tag is 3.0.16.1 because we rebuilt without uplink support to fix gh-131804.
This PR also prevents making calls that are now unsafe without uplink, and updates
the tests to property interpret these failures as unsupported.

GH-131678: fix Windows tail-call CI does not run the test cases (GH-131690)

gh-131807: fix ResourceWarning in test_ucn.py (#131808)

Co-authored-by: Victor Stinner <vstinner@python.org>

Use `assert*` comparison methods in `test_timer_comparison` (#129513)

gh-117174: Adapt `test_multiple_statements_fail_early` to new REPL behavior (follow-up gh-131065) (#131836)

Adapt test to new REPL behavior (follow-up gh-117174)

gh-128002: run all asyncio tests with tsan CI (#131797)