gh-129185: Use PyMutex in tracemalloc (#129246)

gh-129173: Use `_PyUnicodeError_GetParams` in `PyCodec_IgnoreErrors` (#129174)

We also cleanup `PyCodec_StrictErrors` and the error message rendered
when an object of incorrect type is passed to codec error handlers.

gh-119182: Use public PyUnicodeWriter in stringio.c (#129243)

Replace the private _PyUnicodeWriter API with the public
PyUnicodeWriter API.

gh-109975: Add list of 3.13 removed library replacements (#127816)

Add list of 3.13 removed library replacements

gh-91048: Also clear and set ts->asyncio_running_task with eager tasks (#129197)

This was missing from gh-124640. It's already covered by the new
test_asyncio/test_free_threading.py in combination with the runtime
assertion in set_ts_asyncio_running_task.

Co-authored-by: Kumar Aditya <kumaraditya@python.org>

gh-71339: Use new assertion methods in test_idle (#129213)

Revise 10 tests in 7 files, with 1 test split into 2.

gh-91048: Improve example in `asyncio-graph.rst` doc (#129224)

gh-128330: Terminal control characters should be restored on repl exit (#128331)

gh-128479: fix asyncio staggered race leaking tasks, and logging unhandled exception.append exception (#128475)

Co-authored-by: Peter Bierma <zintensitydev@gmail.com>

gh-126004: Remove redundant safeguards for codecs handlers tests (#127680)

We remove the safeguards that were added in `Lib/test/test_capi/test_codecs.py`
since they are now redundant (see 32e07fd377f81cbeb8c108fc791a3e7d631319b6
for additional context).

Indeed, the codecs handlers now correctly handle the `start` and `end` positions
of `UnicodeError` objects and thus should not crash.

gh-128690: Update test_embed for getpath.py exec_prefix change (#129137)

gh-118761: Improve import time for `pstats` and `zipfile` (#128981)

Importing `pstats` or `zipfile` is now roughly 20% faster.

This is achieved by removing type annotations depending on `typing`.

gh-129149: Add fast path in PYLONG_FROM_UINT macro for compact integers (#129168)

Add fast path in PyLong_From*() functions for compact integers.

Co-authored-by: Pieter Eendebak <pieter.eendebak@gmail.com>
Co-authored-by: Sergey B Kirpichev <skirpichev@gmail.com>
Co-authored-by: Yan Yanchii <yyanchiy@gmail.com>
Co-authored-by: Bénédikt Tran <10796600+picnixz@users.noreply.github.com>
Co-authored-by: Victor Stinner <vstinner@python.org>

gh-101410: support custom messages for domain errors in the math module (#124299)

This adds basic support to override default messages for domain errors
in the math_1() helper.  The sqrt(), atanh(), log2(), log10() and log()
functions were modified as examples.  New macro supports gradual
changing of error messages in other 1-arg functions.

Co-authored-by: CharlieZhao <zhaoyu_hit@qq.com>
Co-authored-by: Bénédikt Tran <10796600+picnixz@users.noreply.github.com>

gh-126004: Fix positions handling in `codecs.backslashreplace_errors` (#127676)

This fixes how `PyCodec_BackslashReplaceErrors` handles the `start` and `end`
attributes of `UnicodeError` objects via the `_PyUnicodeError_GetParams` helper.

gh-128863: Deprecate _PyLong_New() function (#129212)

gh-129185: Remove internal TRACE_RAW_MALLOC macro (#129218)

Always build tracemalloc with PyMem_RawMalloc() hooks.

gh-129185: Fix PyTraceMalloc_Untrack() at Python exit (#129191)

Support calling PyTraceMalloc_Track() and PyTraceMalloc_Untrack()
during late Python finalization.

* Call _PyTraceMalloc_Fini() later in Python finalization.
* Test also PyTraceMalloc_Untrack() without the GIL
* PyTraceMalloc_Untrack() now gets the GIL.
* Test also PyTraceMalloc_Untrack() in test_tracemalloc_track_race().

gh-126004: Fix positions handling in `codecs.replace_errors` (#127674)

This fixes how `PyCodec_ReplaceErrors` handles the `start` and `end` attributes
of `UnicodeError` objects via the `_PyUnicodeError_GetParams` helper.

gh-126004: Fix positions handling in `codecs.xmlcharrefreplace_errors` (#127675)

This fixes how `PyCodec_XMLCharRefReplaceErrors` handles the `start` and `end`
attributes of `UnicodeError` objects via the `_PyUnicodeError_GetParams` helper.

Revert "GH-128914: Remove conditional stack effects from `bytecodes.c` and the code generators (GH-128918)" (GH-129202)

The commit introduced a ~2.5-3% regression in the free threading build.

This reverts commit ab61d3f4303d14a413bc9ae6557c730ffdf7579e.

gh-127936, PEP 757: Convert marshal module to use import/export API for ints (#128530)

Co-authored-by: Victor Stinner <vstinner@python.org>
Co-authored-by: Bénédikt Tran <10796600+picnixz@users.noreply.github.com>

gh-128863: Deprecate _PyLong_Sign() function (#129176)

Replace _PyLong_Sign() with PyLong_GetSign().

gh-119182: Use public PyUnicodeWriter in Python-ast.c (#129209)

Replace the private _PyUnicodeWriter API with the public
PyUnicodeWriter API.

Use PyUnicodeWriter_WriteRepr() in ast_repr_list().

gh-119182: Use public PyUnicodeWriter in ast_unparse.c (#129208)

Replace the private _PyUnicodeWriter API with the public
PyUnicodeWriter API.

* Add append_char() function.
* Add APPEND_CHAR() and APPEND_CHAR_FINISH() macros.
* Replace APPEND_STR() and APPEND_STR_FINISH() of single character
  with APPEND_CHAR() and APPEND_CHAR_FINISH().

gh-119182: Use public PyUnicodeWriter in wrap_strftime() (#129206)

Replace the private _PyUnicodeWriter API with the public
PyUnicodeWriter API.

gh-119182: Use public PyUnicodeWriter in time_strftime() (#129207)

Replace the private _PyUnicodeWriter API with the public
PyUnicodeWriter API.

gh-128627: Emscripten: Fix address calculation for wasm-gc trampoline (#128782)

Modifies the memory calculation to divide the entire memory address by 4, not just the base address.

Add colour to GitHub Actions output (#129196)

gh-129192: Use `EnvironmentVarGuard` to restore environment variables (#129193)

Co-authored-by: Cody Maloney <cmaloney@theoreticalchaos.com>

GH-91048: Don't attempt to run on FreeBSD (#129189)

GH-91048: Add utils for capturing async call stack for asyncio programs and enable profiling (#124640)

Signed-off-by: Pablo Galindo <pablogsal@gmail.com>
Co-authored-by: Pablo Galindo <pablogsal@gmail.com>
Co-authored-by: Kumar Aditya <kumaraditya@python.org>
Co-authored-by: Łukasz Langa <lukasz@langa.pl>
Co-authored-by: Savannah Ostrowski <savannahostrowski@gmail.com>
Co-authored-by: Jacob Coffee <jacob@z7x.org>
Co-authored-by: Irit Katriel <1055913+iritkatriel@users.noreply.github.com>

gh-124363: Treat debug expressions in f-string as raw strings (#128399)

Co-authored-by: blurb-it[bot] <43283697+blurb-it[bot]@users.noreply.github.com>

gh-128636: Fix crash in PyREPL when `os.environ` is overwritten with an invalid value (#128653)

gh-129158: Fix unwanted trailing whitespace in test_asyncio.test_subprocess (#129181)

gh-125723:  Fix crash with f_locals when generator frame outlive their generator (#126956)

Co-authored-by: Kirill Podoprigora <kirill.bast9@mail.ru>
Co-authored-by: Alyssa Coghlan <ncoghlan@gmail.com>

gh-128770: fix ResourceWarning in test_pyrepl (#128906)

gh-128894: Fix `TracebackException._format_syntax_error` on custom `SyntaxError` metadata (#128946)

gh-129158: Ensure we restore unix_events.can_use_pidfd after SubprocessThreadedWatcherTests finishes (#129160)

gh-128863: Deprecate private C API functions (#128864)

Deprecate private C API functions:

* _PyBytes_Join()
* _PyDict_GetItemStringWithError()
* _PyDict_Pop()
* _PyThreadState_UncheckedGet()
* _PyUnicode_AsString()
* _Py_HashPointer()
* _Py_fopen_obj()

Replace _Py_HashPointer() with Py_HashPointer().

Remove references to deprecated functions.

GH-128682: Change a couple of functions to only steal references on success. (GH-129132)

Change PyTuple_FromStackRefSteal and PyList_FromStackRefSteal to only steal on success to avoid escaping

gh-61103: Add What's New entry for complex types in ctypes (GH-129129)

Co-authored-by: Sergey B Kirpichev <skirpichev@gmail.com>

gh-128902: Fix check for fallthrough attribute support (#128903)

Clang versions prior to 10 (which corresponds to Apple Clang 12) do not
support the GCC extension syntax __attribute__((fallthrough)), but do
evaluate __has_attribute(fallthrough) to 1 because they support the
C++11 style syntax [[fallthrough]]. The only way to tell if the GCC
style syntax is supported is thus to check the clang version.

Ref: https://github.com/llvm/llvm-project/commit/1e0affb6e564b7361b0aadb38805f26deff4ecfc

gh-128563: Move GO_TO_INSTRUCTION and PREDICT to cases generator (GH-129115)

gh-129093: Fix f-string debug text sometimes getting cut off when expression contains `!` (#129159)

GH-121970: Extract ``pydoc_topics`` into a new extension (#129116)

gh-118878: Pyrepl: show completions menu below the current line (#118939)

Co-authored-by: Pablo Galindo Salgado <Pablogsal@gmail.com>

gh-123024: Correctly prepare/restore around help and show-history commands (#124485)

Co-authored-by: Emily Morehouse <emily@cuttlesoft.com>
Co-authored-by: Pablo Galindo Salgado <Pablogsal@gmail.com>

gh-126332: Fix pyrepl crash for double ctrl-z in line overflow (#126650)

Co-authored-by: blurb-it[bot] <43283697+blurb-it[bot]@users.noreply.github.com>

gh-126172: Fix a misleading statement in PYTHON_BASIC_REPL documentation (#127203)

Fix a misleading statement in PYTHON_BASIC_REPL documentation.

gh-122845: fix parameter_list_starargs in function definition pseudo-grammar (#122847)

Thanks to Artur Chakhvadze for bugfix.

gh-125553: Fix backslash continuation in `untokenize` (#126010)

gh-128720: Fix doc inacurracy about __main__.__file__ existence in the REPL (#128721)

Fix doc inacurracy about __main__.__file__ existence in the REPL

GH-128520: Make `pathlib._abc.WritablePath` a sibling of `ReadablePath` (#129014)

In the private pathlib ABCs, support write-only virtual filesystems by
making `WritablePath` inherit directly from `JoinablePath`, rather than
subclassing `ReadablePath`.

There are two complications:

- `ReadablePath.open()` applies to both reading and writing
- `ReadablePath.copy` is secretly an object that supports the *read* side
  of copying, whereas `WritablePath.copy` is a different kind of object
  supporting the *write* side

We untangle these as follow:

- A new `pathlib._abc.magic_open()` function replaces the `open()` method,
  which is dropped from the ABCs but remains in `pathlib.Path`. The
  function works like `io.open()`, but additionally accepts objects with
  `__open_rb__()` or `__open_wb__()` methods as appropriate for the mode.
  These new dunders are made abstract methods of `ReadablePath` and
  `WritablePath` respectively.  If the pathlib ABCs are made public, we
  could consider blessing an "openable" protocol and supporting it in
  `io.open()`, removing the need for `pathlib._abc.magic_open()`.
- `ReadablePath.copy` becomes a true method, whereas `WritablePath.copy` is
  deleted. A new `ReadablePath._copy_reader` property provides a
  `CopyReader` object, and similarly `WritablePath._copy_writer` is a
  `CopyWriter` object. Once GH-125413 is resolved, we'll be able to move
  the `CopyReader` functionality into `ReadablePath.info` and eliminate
  `ReadablePath._copy_reader`.

gh-129141: Fix build on gcc-9.4.0 (GH-129142)

gh-127873: Only check `sys.flags.ignore_environment` for `PYTHON*` env vars (#127877)

gh-128889: Zero out memory ctypes for generated struct layout tests (GH-128944)

gh-71339: Fix an order-dependent failure in test_unittest (GH-129133)

It failed if it was preceded by test_builtin.

gh-128563: Move lltrace into the frame struct (GH-129113)

gh-128679: Use _PyThreadState_GET() in tracemalloc.c (#129126)

Replace uncommon PyGILState_GetThisThreadState() with common
_PyThreadState_GET().

gh-129064: Fix RST markup for the NEWS and What's New entries (#129131)

This amends the NEWS and What's New entries introduced in 0a6412f9cc9e694e76299cfbd73ec969b7d47af6.

gh-126925: Make PyConfig.use_system_logger read-only (#129124)

The variable is only used once during early Python initialization, it
doesn't make sense to modify it at runtime.

Remove PyInit__imp() function (#129125)

This function was exposed by mistake to the public C API. It's the
only "PyInit" function which is exposed.

gh-111178: fix UBSan failures in `Modules/_ctypes` (#129071)

This fixes UBSan failures for the following objects:

- `DictRemoverObject` and `StructParamObject`,
- `CDataObject` and `CFieldObject`, and
- `PyCFuncPtrObject` and `PyCArgObject`.

On the default build, we convert the `LOCK_PTR` and `UNLOCK_PTR` macros to
functions with an unused parameter to ease "unused variable" compiler warnings
suppression. Finally, we also remove some redundant casts to `PyObject *`.

gh-127787: allow retrieving the clipped slice length in `_PyUnicodeError_GetParams` (GH-128980)

gh-126349: test_turtle: Add cleanup to avoid reference leaks (GH-129079)

GH-128563: Add new frame owner type for interpreter entry frames (GH-129078)

Add new frame owner type for interpreter entry frames

gh-128156: Guard use of `ffi_type_complex_double` on macOS system libffi (GH-128680)

* Determine ffi complex support at runtime
* Also, generate SIMPLE_TYPE_CHARS once at runtime

GH-127953: Make line number lookup O(1) regardless of the size of the code object (GH-128350)

gh-71339: Use new assertion methods in test_import and test_importlib (GH-129052)

Docs: fix typo in `Doc/howto/mro.rst` (GH-129095)

gh-128595: Fix `test__colorize` unexpected keyword argument 'file' on buildbots (#129070)

Revert "doc: add social cards generation support in sphinxext-opengraph (#129085)" (#129106)

GH-121970: Extract ``changes`` into a new extension (#129105)

Add Adam Turner to CODEOWNERS (#129104)

Co-authored-by: Hugo van Kemenade <1324225+hugovk@users.noreply.github.com>

GH-92897: schedule the check_home deprecation to 3.15 (#129102)

gh-111178: fix UBSan failures in `Modules/_multiprocessing/semaphore.c` (#129084)

fix UBSan failures for `SemLockObject`

doc: add social cards generation support in sphinxext-opengraph (#129085)

doc: fix venv creating for the local Python using uv (#129094)

gh-91279: ZipFile.writestr now respect SOURCE_DATE_EPOCH (#124435)

GH-128131: Completely support random read access of uncompressed unencrypted files in ZipFile (#128143)

Co-authored-by: blurb-it[bot] <43283697+blurb-it[bot]@users.noreply.github.com>
Co-authored-by: Bénédikt Tran <10796600+picnixz@users.noreply.github.com>

gh-128588: gh-128550: remove eager tasks optimization that missed and introduced incorrect cancellations (#129063)

Co-authored-by: Kumar Aditya <kumaraditya@python.org>

GH-128914: Remove conditional stack effects from `bytecodes.c` and the code generators (GH-128918)

GH-129064: deprecate sysconfig.expand_makefile_vars (#129082)

gh-128308: pass `**kwargs` to asyncio task_factory (#128768)

Co-authored-by: Kumar Aditya <kumaraditya@python.org>

Move to public Linux arm64 hosted runners (#128964)

Co-authored-by: Hugo van Kemenade <1324225+hugovk@users.noreply.github.com>

gh-118915: C API: Document compiler flag macros (GH-129028)

Docs C API: Clarify what happens when null bytes are passed to `PyUnicode_AsUTF8` (#127458)

Co-authored-by: Stan U. <89152624+StanFromIreland@users.noreply.github.com>
Co-authored-by: Tomas R. <tomas.roun8@gmail.com>
Co-authored-by: Victor Stinner <vstinner@python.org>

GH-128939: Refactor JIT optimize structs (GH-128940)

gh-129044: Update glossary entry for 'loader' to reflect current import system (#129073)

Co-authored-by: Adam Turner <9087854+AA-Turner@users.noreply.github.com>

gh-129033: Remove _PyInterpreterState_SetConfig() function (#129048)

Remove _PyInterpreterState_GetConfigCopy() and
_PyInterpreterState_SetConfig() private functions. PEP 741 "Python
Configuration C API" added a better public C API: PyConfig_Get() and
PyConfig_Set().

Add Configuration Options table to PyInitConfig API doc (#129062)

Document PyConfig members:

* dump_refs_file
* stdlib_dir
* use_frozen_modules
* _pystats

gh-71339: Use new assertion methods in test_ctypes (GH-129054)

gh-128978: Fix a `NameError` in `sysconfig.expand_makefile_vars` (#128979)

This fixes a regression introduced by 4a53a397c311567f05553bc25a28aebaba4f6f65.

Remove duplicated dict keys in `test_{embed,long}.py` fixtures (#128727)

gh-111178: Regen clinic and fix exceptions.c post gh-128447 (#129060)

gh-71339: Use new assertion methods in test_capi (GH-129053)

gh-111178: Generate correct signature for most self converters (#128447)

gh-128360: Add `_Py_AssertHoldsTstate` as assertion for holding a thread state (#128361)

Co-authored-by: Kumar Aditya <kumaraditya@python.org>

gh-71339: Use new assertion methods in `test_asyncio` (#129051)