gh-116738: Make pwd module thread-safe (#136695)

Make the pwd module functions getpwuid(), getpwnam(), and getpwall() thread-safe. These changes apply to scenarios where the GIL is disabled or in subinterpreter use cases.

gh-127146: Emscripten: Set umask to zero in python.sh (#136740)

Clears the umask used during a test of pydoc.apropos when testing on
Emscripten. This is to work around a known issue in Emscripten; but it's not
clear if the chmod call that is causing the problem is actually testing
anything of significance.

fix traceback.FrameSummary docstring by adding end_lineno, colno, and end_colno (#136716)

gh-136669: build `_asyncio` as static module (#136670)

`_asyncio` is now built as a static module so that thread states can be accessed directly via registers and avoids the overhead of function call.

gh-126548: Add a thread-unsafety warning for `importlib.reload()` (GH-136704)

gh-127146: Emscripten: Don't need to avoid unpaired surrogate anymore (#136707)

This might have been fixed by gh-136624, or by some Emscripten change.
In any case, it no longer seems to be needed.

gh-136710: Fix bad indentation in `os.chdir` docstring (GH-136709)

Add `.gram` file to the `.editorconfig` (#136680)

gh-127146: Emscripten: more regular stack overflow skips (#136708)

Makes the Emscripten stack overflow skip message consistent with WASI,
and replaces some ad-hoc skips.

gh-127146: Emscripten: Make os.umask() actually work (#136706)

Provide a stub implementation of umask that is enough to get some tests passing.
More work is needed upstream in Emscripten to make all umask tests to pass.

Improved venv docs to indicate that isolation is the default. (#136698)

* Improved venv docs to note that isolation is the default.

* Insert "that" so that a sentence reads better.

* Improved wording.

---------

Co-authored-by: Vinay Sajip <vinay_sajip@yahoo.co.uk>

gh-135148: Correctly handle f/t strings with comments and debug expressions (#135198)

fix grammar typo in `logging.rst` (#136584)

gh-127146: Report uid in Emscripten + node as native uid (#136509)

Corrects the handling of getuid on emscripten, which was consistently reporting as 0.

Fix the doctest.testmod() docstring (GH-136675)

__test__ = None is not supported since Python 2.4.

Fix index entry and anchor for module.__test__ (GH-136674)

It was "doctest.module attribute". Now it is "module attribute".

gh-135909: Assert incoming `refcnt != 0` for the free threaded GC (GH-136009)

This helps catch double deallocation bugs and is similar to the
assertion in the GIL-enabled build.  The call to `validate_refcounts`
is moved up to start of the GC because `queue_untracked_obj_decref()`
creates it own zero reference count garbage.

gh-72327: Suggest using system terminal for pip install in PyREPL (#136328)

Users new to Python packaging often try to use pip from the REPL only to
be met with a confusing SyntaxError. If this happens, guide the user to
use a system terminal instead to invoke pip.

Closes #72327

---------

Co-authored-by: Tom Viner <tom@viner.tv>
Co-authored-by: Brian Schubert <brianm.schubert@gmail.com>
Co-authored-by: Hugo van Kemenade <1324225+hugovk@users.noreply.github.com>
Co-authored-by: Alyssa Coghlan <ncoghlan@gmail.com>

gh-111968: remove redundant fetching of interpreter state in `dict` implementation  (#136673)

gh-136682: Remove incorrect statement that `os.path.samestat` accepts file-like objects (#136683)

gh-136155: Docs: check for EPUB fatal errors in CI (#134074)

Co-authored-by: blurb-it[bot] <43283697+blurb-it[bot]@users.noreply.github.com>

gh-72570: mention the incompatibility of XOFs with HMAC (#136676)

GH-132661: Add ``string.templatelib.convert()`` (#135217)

GH-133711: Enable UTF-8 mode by default (PEP 686) (#133712)

Co-authored-by: Victor Stinner <vstinner@python.org>

gh-131189: Fix "msvcrt" import warning on Linux when "_ctypes" is not available. (GH-131201)

Fix "msvcrt" import warning on Linux when "_ctypes" is not available.

On Linux, compiling without "libffi" causes a
"No module named 'msvcrt'" warning when launching PyREPL.

gh-136663: fix signatures of PyFloat_Pack/Unpack in docs (#136664)

Fix a minor indentation error (#136661)

gh-116738: Make grp module thread-safe (#135434)

Make grp module methods getgrgid() and getgrnam() thread-safe when the GIL is disabled and getgrgid_r()/getgrnam_r() C APIs are not available.
---------

Co-authored-by: Kumar Aditya <kumaraditya@python.org>

gh-136396: Include instrumentation when creating new copies of the bytecode (#136525)

Previously, we assumed that instrumentation would happen for all copies of
the bytecode if the instrumentation version on the code object didn't match
the per-interpreter instrumentation version. That assumption was incorrect:
instrumentation will exit early if there are no new "events," even if there
is an instrumentation version mismatch.

To fix this, include the instrumented opcodes when creating new copies of
the bytecode, rather than replacing them with their uninstrumented variants.
I don't think we have to worry about races between instrumentation and creating
new copies of the bytecode: instrumentation and new bytecode creation cannot happen
concurrently. Instrumentation requires that either the world is stopped or the
code object's per-object lock is held and new bytecode creation requires holding
the code object's per-object lock.

GH-135904: Improve the JIT's performance on macOS (GH-136528)

gh-90733: improve `hashlib.scrypt` interface (#136100)

* add `scrypt` to `hashlib.__all__`
* improve `hashlib.scrypt` exception messages

gh-134567: Move unittest What’s New entry (#136630)

Partially revert "gh-101100: Fix sphinx warnings in `library/email.parser.rst` (#136475)" (#136629)

gh-67341: fix a typo in `Include/fileutils.h` (#136049)

`IO_REPARSE_TAG_SYMLINK` is mapped to `S_IFLNK` in `fileutils.c`, not in `posixmodule.c`

gh-135256: Simplify parsing parameters in Argument Clinic (GH-135257)

gh-127146: Emscripten: Fix test_open_undecodable_uri by setting `-sTEXTDECODER=2` (#136624)

Removes the JS text decoder fallback and gets rid of the bugs due to the differences
in behavior on invalid utf8 strings. See https://github.com/emscripten-core/emscripten/issues/24690.

gh-121914: Change the names of the symbol tables for lambda and genexpr (GH-135288)

Change the names of the symbol tables for lambda expressions and generator
expressions to "<lambda>" and "<genexpr>" respectively to avoid conflicts
with user-defined names.

gh-127971: fix off-by-one read beyond the end of a string during search (#132574)

gh-42237: Link to complete list of codec aliases (#136625)

Closes #42237

gh-132629: Deprecate accepting out-of-range values for unsigned integers in PyArg_Parse (GH-132630)

For unsigned integer formats in the PyArg_Parse* functions,
accepting Python integers with value that is larger than
the maximal value the corresponding C type or less than
the minimal value for the corresponding signed integer type
is now deprecated.

gh-132346: Docs: Clarify that reference counts aren't stable between versions (GH-132352)

gh-136547: allow to temporarily disable hash algorithms in tests (#136570)

Docs: Fix and improve the `PyUnstable_Object_EnableDeferredRefcount` documentation (GH-135323)

gh-134833: improve docs for `del s[i:j]` in `Mutable Sequence Types` (#134834)

gh-132969: update ACKS file (gh-133222) (#136144)

gh-136523: Fix wave.Wave_write emitting an unraisable when open raises (GH-136529)

gh-134939: Correct `concurrent.interpreters` source code link (#136564)

gh-101100: Fix sphinx warnings in Doc/library/platform.rst (GH-136562)

gh-136591: avoid using deprecated features for OpenSSL 3.0+ (#136592)

Since OpenSSL 3.0, `ERR_func_error_string()` always returns NULL and
`EVP_MD_CTX_get0_md()` should be preferred over `EVP_MD_CTX_md()`.

gh-136549: Fix signature of threading.excepthook() (GH-136559)

gh-91153: prevent a crash in `bytearray.__setitem__(ind, ...)` when `ind.__index__` has side-effects (#132379)

Co-authored-by: Bénédikt Tran <10796600+picnixz@users.noreply.github.com>

gh-134759: fix `UnboundLocalError` in `email.message.Message.get_payload` (#136071)

Co-authored-by: Bénédikt Tran <10796600+picnixz@users.noreply.github.com>

gh-99813: Start using `SSL_sendfile` when available (#99907)

Co-authored-by: Bénédikt Tran <10796600+picnixz@users.noreply.github.com>
Co-authored-by: Peter Bierma <zintensitydev@gmail.com>

gh-99631: Add custom `loads` and `dumps` support for the `shelve` module (#118065)

Co-authored-by: Pieter Eendebak <pieter.eendebak@gmail.com>
Co-authored-by: Petr Viktorin <encukou@gmail.com>
Co-authored-by: Bénédikt Tran <10796600+picnixz@users.noreply.github.com>

gh-89083: Add CLI tests for `UUIDv{6,7,8}` (#136548)

Co-authored-by: Bénédikt Tran <10796600+picnixz@users.noreply.github.com>

gh-135853: add `math.fmax` and `math.fmin` (#135888)

gh-136565: Improve and amend `hashlib.__doc__` (#136566)

gh-111506: Add _Py_OPAQUE_PYOBJECT to hide PyObject layout & related API (GH-136505)

Allow Py_LIMITED_API for (Py_GIL_DISABLED && _Py_OPAQUE_PYOBJECT)

API that's removed when _Py_OPAQUE_PYOBJECT is defined:

    - PyObject_HEAD
    - _PyObject_EXTRA_INIT
    - PyObject_HEAD_INIT
    - PyObject_VAR_HEAD
    - struct _object (i.e. PyObject) (opaque)
    - struct PyVarObject (opaque)
    - Py_SIZE
    - Py_SET_TYPE
    - Py_SET_SIZE
    - PyModuleDef_Base (opaque)
    - PyModuleDef_HEAD_INIT
    - PyModuleDef (opaque)
    - _Py_IsImmortal
    - _Py_IsStaticImmortal

Note that the `_Py_IsImmortal` removal (and a few other issues)
 means _Py_OPAQUE_PYOBJECT only works with limited
API 3.14+ now.

Co-authored-by: Victor Stinner <vstinner@python.org>

gh-135401: Test AWS-LC as a cryptography library in CI (GH-135402)

Co-authored-by: Adam Turner <9087854+AA-Turner@users.noreply.github.com>
Co-authored-by: Bénédikt Tran <10796600+picnixz@users.noreply.github.com>
Co-authored-by: Hugo van Kemenade <1324225+hugovk@users.noreply.github.com>
Co-authored-by: Zachary Ware <zach@python.org>

Minor edit: Improve comment readability and ordering (gh-136557)

Doc: More duplicate word fixes (GH-136299)

gh-101100: Fix sphinx warnings in Doc/library/functools.rst (GH-136424)

Add index entries and anchors for cache_info, cache_clear and register.

gh-135906: Test the internal C API in test_cext (#136247)

Remove duplicated definition: atexit_datacallbackfunc type
is already defined by Include/cpython/pylifecycle.h.

gh-136156: Remove tempfile test_link_tmpfile() (#136534)

It's not always possible to guarantee that the file was opened with
O_TMPFILE even if tempfile._O_TMPFILE_WORKS is true.

gh-136541: Fix several problems of perf trampolines in x86_64 and aarch64 (#136500)

This commit fixes the following problems:

* The x86_64 trampolines are not preserving frame pointers
* The hardcoded offsets to the code segment from the FDE only worked properly for x64_64
* The CIE data was not following conventions of aarch64
* The eh_frame for aarch64 was not fully correct

gh-136300: Modify C tests to conform to PEP-737 (GH-136301)

- Use %T format specifier instead of %s and Py_TYPE(x)->tp_name.
- Remove legacy %.200s format specifier for truncating type names.

Co-authored-by: Victor Stinner <vstinner@python.org>

gh-136434: Fix docs generation of `UnboundItem` in subinterpreters (#136435)

gh-76637: Note that `undefined` Codec is for testing (#136531)

Closes #76637

gh-101100: Fix sphinx warnings in `library/email.parser.rst` (#136475)

gh-107538: [Enum] fix handling of inverted/negative values (GH-132273)

* Fix flag mask inversion when unnamed flags exist.

For example:

    class Flag(enum.Flag):
        A = 0x01
        B = 0x02
        MASK = 0xff

    ~Flag.MASK is Flag(0)

* EJECT and KEEP flags (IntEnum is KEEP) use direct value.

* correct Flag inversion to only flip flag bits

IntFlag will flip all bits -- this only makes a difference in flag sets with
missing values.

* correct negative assigned values in flags

negative values are no longer used as-is, but become inverted; i.e.

    class Y(self.enum_type):
        A = auto()
        B = auto()
        C = ~A        # aka ~1 aka 0b1 110 (from enum.bin()) aka 6
        D = auto()

    assert Y.C. is Y.B|Y.D

Omit `Python/perf_jit_trampoline.c` from the `**/*jit*` CODEOWNERS rule (#136519)

Omit perf_jit_trampoline from "JIT" codeowners

gh-136517: Print uncollectable objects if DEBUG_UNCOLLECTABLE mode was set (#136518)

gh-135953:  Implement sampling tool under profile.sample (#135998)

Implement a statistical sampling profiler that can profile external
Python processes by PID. Uses the _remote_debugging module and converts
the results to pstats-compatible format for analysis.

Co-authored-by: Pablo Galindo <pablogsal@gmail.com>

gh-52876: Implement missing parameter in `codecs.StreamReaderWriter` functions (#136498)

Closes #52876

gh-82663: Clarify `codecs.iterdecode/encode` docs (#136497)

Closes #82663

gh-132661: Add default value (of `""`) for `Interpolation.expression` (#136441)

gh-136394: Fix race condition in test_zstd (GH-136432)

gh-82088: Improve performance of PyLong_As*() for multi-digit ints (#135585)

Co-authored-by: blurb-it[bot] <43283697+blurb-it[bot]@users.noreply.github.com>
Co-authored-by: Victor Stinner <vstinner@python.org>

gh-136209: Add .. c:var:: declarations for C exception types (GH-136210)

Co-authored-by: Victor Stinner <vstinner@python.org>

gh-136438: Make sure `test_builtins` pass with all optimization levels (#136474)

gh-136476: Remove creation of unused list (GH-136494)

gh-135846: Add zstd dependency to Android build script (#136253)

Adds zstd to the Android build process.

---------

Co-authored-by: Malcolm Smith <smith@chaquo.com>

gh-136476: Show the full stack in get_async_stack_trace in _remote_debugging (#136483)

gh-102740: Clarify time.monotonic() "system-wide" in the doc (#136431)

gh-136156: Skip test_tempfile.test_link_tmpfile() on Android (#136430)

Adds a test skip on platforms where hard links are not available (which includes Android).

gh-136145: Define 'standard library' and 'stdlib' in the glossary (GH-136146)

---------

Co-authored-by: Hugo van Kemenade <1324225+hugovk@users.noreply.github.com>
Co-authored-by: Éric <merwok@netwok.org>

Add Diego Russo as code owner of the JIT (#136460)

GH-115802: Optimize JIT stencils for size (GH-136393)

Minor edit: Move comments closer to the code they describe (gh-136477)

gh-81520: Document unexpected `os.path.ismount` behaviour with btrfs subvolumes (GH-136058)

gh-131825: Fix `sqlite3` timezone-naive adapter recipe (GH-136270)

Docs: unittest.enterModuleContext is not a classmethod (#136464)

gh-136447: Use `self.loop` instead of global `loop` variable in asyncio REPL (#136448)

gh-134657: Remove newly added private names from asyncio.__all__ (#134665)

gh-53243: Document `codecs.readbuffer_encode()` (#136284)

Closes #53243

gh-94503: Update logging cookbook example with info on addressing log injection. (GH-136446)

Co-authored-by: Stan Ulbrych <89152624+StanFromIreland@users.noreply.github.com>

gh-119109: improve `functools.partial` vectorcall with keywords (#124584)

Co-authored-by: Kumar Aditya <kumaraditya@python.org>
Co-authored-by: Serhiy Storchaka <storchaka@gmail.com>

gh-136229: Remove Platform Emscripten is not supported warning (#136230)

Updates configure script to identify Emscripten as Tier 3.

gh-91048: Revert the memory cache removal for remote debugging (#136440)

gh-91048: Reintroduce the memory cache for remote debugging

gh-92536: Fix comment about number of unicode string types (#136439)