gh-111062 CI: Update skip lists for resuable workflows (#111521)

CI: Update skip lists

gh-111277: In summarize_stats.py, don't fail fast on invalid ratios (#111278)

gh-109329: Count tier2 opcode misses (#110561)

This keeps a separate 'miss' counter for each micro-opcode, incremented whenever a guard uop takes a deoptimization side exit.

gh-76785: Move the Cross-Interpreter Code to Its Own File (gh-111502)

This is partly to clear this stuff out of pystate.c, but also in preparation for moving some code out of _xxsubinterpretersmodule.c.  This change also moves this stuff to the internal API (new: Include/internal/pycore_crossinterp.h).  @vstinner did this previously and I undid it.  Now I'm re-doing it. :/

gh-110697: Use CLOCK_RES in test_os.TimerfdTests (#111529)

More TimerfdTests tests tolerate a difference of 1 ms in measured
elapsed time.

gh-90815: Fix mimalloc atomic.h on Windows arm64 (#111527)

mi_atomic_load_explicit() casts 'p' argument to drop the 'const'
qualifier on Windows arm64 platform. Fix the compiler warning:

    'function': different 'const' qualifiers
    (compiling source file ..\Objects\mimalloc\options.c)

gh-90815: Fix mimalloc build on WASI (#111524)

Include <unistd.h> to get sbrk() function.

gh-90815: Fix _PyMem_MimallocEnabled() compiler warning (#111522)

Don't declare _PyMem_MimallocEnabled() if WITH_PYMALLOC macro is not
defined (./configure --without-pymalloc).

Fix also a typo in _PyInterpreterState_FinalizeAllocatedBlocks().

Remove myself from typing CODEOWNERS (#111523)

gh-111181: Fix enum doctests (GH-111180)

Co-authored-by: Ethan Furman <ethan@stoneleaf.us>

gh-111366: Correctly show custom syntax error messages in the codeop module functions (#111384)

gh-111284: Make multiprocessing tests with threads faster and more reliable (GH-111285)

gh-110481: Fix _Py_ThreadId for non-free-threaded mode (gh-111503)

gh-108082: C API: Add tests for PyErr_WriteUnraisable() (GH-111455)

Also document the behavior when called with NULL.

gh-109515: When generating deep frozen modules on Windows, use a list file instead of arguments (GH-109516)

gh-110481: Implement biased reference counting (gh-110764)

gh-90815: Add mimalloc memory allocator (#109914)

* Add mimalloc v2.12

Modified src/alloc.c to remove include of alloc-override.c and not
compile new handler.

Did not include the following files:

 - include/mimalloc-new-delete.h
 - include/mimalloc-override.h
 - src/alloc-override-osx.c
 - src/alloc-override.c
 - src/static.c
 - src/region.c

mimalloc is thread safe and shares a single heap across all runtimes,
therefore finalization and getting global allocated blocks across all
runtimes is different.

* mimalloc: minimal changes for use in Python:

 - remove debug spam for freeing large allocations
 - use same bytes (0xDD) for freed allocations in CPython and mimalloc
   This is important for the test_capi debug memory tests

* Don't export mimalloc symbol in libpython.
* Enable mimalloc as Python allocator option.
* Add mimalloc MIT license.
* Log mimalloc in Lib/test/pythoninfo.py.
* Document new mimalloc support.
* Use macro defs for exports as done in:
  https://github.com/python/cpython/pull/31164/

Co-authored-by: Sam Gross <colesbury@gmail.com>
Co-authored-by: Christian Heimes <christian@python.org>
Co-authored-by: Victor Stinner <vstinner@python.org>

gh-111062: Reusable Windows build that supports free-threaded mode as the conditional CI (#111493)

* gh-111062 Set up free-threaded CI for windows

Co-authored-by: Donghee Na <donghee.na@python.org>
* Apply suggestions from code review

Co-authored-by: Hugo van Kemenade <hugovk@users.noreply.github.com>
* Update

* Update names

* Add files

* Update

* Revert "Update"

This reverts commit 4f17e1af0dbce3b7959b93b41baaf040dee790cc.

* fix

---------

Co-authored-by: juanjose.tenorio <juanjose2611@gmail.com>
Co-authored-by: Hugo van Kemenade <hugovk@users.noreply.github.com>

gh-111062: Update name of reusable workflows for Ubuntu / macOS (gh-111494)

gh-111062 Update name of reusable workflows for linux / macOS

gh-111062: Reusable ubuntu build that supports free-threaded mode as the conditional CI (#111452)

Co-authored-by: Donghee Na <donghee.na92@gmail.com>

gh-106168: Check allocated instead of size index bounds in PyList_SET_ITEM() (#111480)

Check the index bound assertions in PyList_SET_ITEM() against [0:allocated] instead of [0:size] to re-allow valid use cases that assign within the allocated area.

GH-111339: Fix initialization and finalization of static optimizer types (GH-111430)

gh-111165: Remove documentation for moved functions (GH-111467)

gh-101100: Fix sphinx warnings in `library/asyncio-eventloop.rst` (GH-111222)

* gh-101100: Fix sphinx warnings in `library/asyncio-eventloop.rst`

* Update Doc/library/socket.rst

Co-authored-by: Hugo van Kemenade <hugovk@users.noreply.github.com>
* Update asyncio-eventloop.rst

* Update socket.rst

---------

Co-authored-by: Hugo van Kemenade <hugovk@users.noreply.github.com>

gh-111347: Remove wrong assertion in test_sendfile (#111377)

Windows is different.

gh-111062: Build both default and free-threaded on macOS (gh-111449)

gh-94808: Add coverage test for number check (gh-111445)

gh-111062: Separate macOS build into a reusable workflow (gh-111444)

gh-66425: Remove the unreachable code to set `REMOTE_HOST` header (gh-111441)

gh-111426: Remove `test_cmd.test_coverage` (#111427)

GH-110109: Move tests for `pathlib.Path.walk()` into main test classes. (#110655)

gh-79033: Try to fix asyncio.Server.wait_closed() again (GH-111336)

* Try to fix asyncio.Server.wait_closed() again

I identified the condition that `wait_closed()` is intended
to wait for: the server is closed *and* there are no more
active connections.

When this condition first becomes true, `_wakeup()` is called
(either from `close()` or from `_detach()`) and it sets `_waiters`
to `None`. So we just check for `self._waiters is None`; if it's
not `None`, we know we have to wait, and do so.

A problem was that the new test introduced in 3.12 explicitly
tested that `wait_closed()` returns immediately when the server
is *not* closed but there are currently no active connections.
This was a mistake (probably a misunderstanding of the intended
semantics). I've fixed the test, and added a separate test that
checks exactly for this scenario.

I also fixed an oddity where in `_wakeup()` the result of the
waiter was set to the waiter itself. This result is not used
anywhere and I changed this to `None`, to avoid a GC cycle.

* Update Lib/asyncio/base_events.py

---------

Co-authored-by: Carol Willing <carolcode@willingconsulting.com>

CI: Include Python version in cache.config key (#111410)

* Include Python version in cache.config key, after Python setup

* Remove EOL 3.7 from branch triggers

gh-111342: fix typo in math.sumprod (GH-111416)

gh-110205: Fix asyncio ThreadedChildWatcher._join_threads() (#110884)

- `ThreadedChildWatcher.close()` is now *officially* a no-op; `_join_threads()` never did anything.
- Threads created by that class are now named `asyncio-waitpid-NNN`.
- `test.test_asyncio.utils.TestCase.close_loop()` now waits for the child watcher's threads, but not forever; if a thread hangs, it raises `RuntimeError`.

gh-59013: Make line number of function breakpoint more precise (#110582)

gh-108765: Include explicitly <unistd.h> in signalmodule.c (#111402)

unistd.h is needed by alarm() and pause() functions.

gh-111406: Fix broken link to bpython's site (#111407)

Fix typos in import system docs (#111396)

gh-111386: Fix `uint32_t` cast in `generated_cases.c.h` (#111387)

gh-111388: Add `show_group` parameter to `traceback.format_exception_only` (#111390)

gh-111276: Clarify docs and comments about the role of LC_CTYPE (#111319)

Fix locale.LC_CTYPE documentation to no longer mention string.lower() et al. Those functions were removed in Python 3.0:
https://docs.python.org/2/library/string.html#deprecated-string-functions

Also, fix a comment in logging about locale-specific behavior of `str.lower()`.

Co-authored-by: Hugo van Kemenade <hugovk@users.noreply.github.com>

no-issue: Remove unused variable in getpath.py (gh-111372)

gh-89519: Remove classmethod descriptor chaining, deprecated since 3.11 (gh-110163)

gh-111343: Fix `itertools` docs: `start` arg is optional for `count` (gh-111344)

gh-109587: Allow "precompiled" perf-trampolines to largely mitigate the cost of enabling perf-trampolines (#109666)

gh-111380: Show SyntaxWarnings only once when parsing if invalid syntax is encouintered (#111381)

GH-94438: Fix RuntimeWarning for jump tests in test_sys_settrace (GH-111341)

GH-111293: Fix DirEntry.inode dropping higher bits on Windows (GH-111294)

gh-111354: define names for RESUME oparg values (#111365)

gh-111259: Optimize recursive wildcards in pathlib (GH-111303)

Regular expression pattern `(?s:.)` is much faster than `[\s\S]`.

gh-109094: replace frame->prev_instr by frame->instr_ptr (#109095)

Output more details in the re tracing (GH-111357)

gh-111348: Fix direct invocation of `test_doctest`; remove `test_doctest.test_coverage` (#111349)

Co-authored-by: Sergey B Kirpichev <skirpichev@gmail.com>

GH-111213: Fix a few broken stats (GH-111216)

GH-111339: Change `valid` property of executors to `is_valid()` method (GH-111350)

bpo-43950: handle wide unicode characters in tracebacks (#28150)

gh-67224: Show source lines in tracebacks when using the -c option when running Python (#111200)

Docs: Add `restart_events()` and positional arg semantics for `sys.monitoring` (#111291)

Co-authored-by: Alex Waygood <Alex.Waygood@Gmail.com>

gh-110679: Improved markup in enum.rst (GH-110747)

gh-100762: Fix optimization in gen_close  (#111069)

gh-111165: Add missed "support." prefix for "verbose" (GH-111327)

gh-108590: Improve sqlite3 docs on encoding issues and how to handle those (#108699)

Add a guide for how to handle non-UTF-8 text encodings.
Link to that guide from the 'text_factory' docs.

Co-authored-by: Alex Waygood <Alex.Waygood@Gmail.com>
Co-authored-by: C.A.M. Gerlach <CAM.Gerlach@Gerlach.CAM>
Co-authored-by: Corvin <corvin@corvin.dev>
Co-authored-by: Ezio Melotti <ezio.melotti@gmail.com>
Co-authored-by: Serhiy Storchaka <storchaka@gmail.com>

gh-111187: Postpone removal version for locale.getdefaultlocale() to 3.15 (#111188)

gh-111230: Fix errors checking in _ssl module init (#111232)

Introduce ADD_INT_CONST macro wrapper for PyModule_AddIntConstant()

gh-111174: Fix crash in getbuffer() called repeatedly for empty BytesIO (GH-111210)

gh-111165: Move test running code from test.support to libregrtest (GH-111166)

Remove no longer used functions run_unittest() and run_doctest() from
the test.support module.

gh-106320: Re-add some PyLong/PyDict C-API functions (GH-#111162)

* gh-106320: Re-add _PyLong_FromByteArray(), _PyLong_AsByteArray() and _PyLong_GCD() to the public header files since they are used by third-party packages and there is no efficient replacement.

See https://github.com/python/cpython/issues/111140
See https://github.com/python/cpython/issues/111139

* gh-111262: Re-add _PyDict_Pop() to have a C-API until a new public one is designed.

gh-111065: Add more tests for the C API with the PySys_ prefix (GH-111067)

* Move existing tests for PySys_GetObject() and PySys_SetObject() into
  specialized files.
* Add test for PySys_GetXOptions() using _testcapi.
* Add tests for PySys_FormatStdout(), PySys_FormatStderr(),
  PySys_WriteStdout() and PySys_WriteStderr() using ctypes.

Bump test deps: `ruff` and `mypy` (#111288)

gh-111295: Fix error checking in time extension module init (#111296)

Introduce ADD_INT macro wrapper for PyModule_AddIntConstant()

gh-111233: Fix error checking in select extension module init (#111234)

Introduce ADD_INT macro wrapper for PyModule_AddIntConstant()

gh-111253: Fix error checking in _socket module init (#111254)

gh-111251: Fix error checking in _blake2 module init (#111252)

Introduce ADD_INT_CONST macro wrapper for PyModule_AddIntConstant()

gh-57129: Add test for inspect.getsource in the REPL (#111197)

Fix first parameter name in `tool` functions from `sys.monitoring` (#111286)

gh-102956: Fix returning of empty byte strings after seek in zipfile … (#103565)

gh-102956: Fix returning of empty byte strings after seek in zipfile module. This was a regression in 3.12.0 due to a performance enhancement.

GH-109214: _SET_IP before _PUSH_FRAME (but not _POP_FRAME) (GH-111001)

GH-111182: Update EnumType.__contains__ docs (GH-111184)

gh-109017: Use non alternate name for Kyiv (GH-109251)

tzdata provides Kiev as an alternative to Kyiv:
https://sources.debian.org/src/tzdata/2023c-10/backward/?hl=314#L314

But Debian moved it to the tzdata-legacy package breaking the test:
https://bugs.debian.org/cgi-bin/bugreport.cgi?bug=1050530

This patch switches to the name provided by tzdata.

Also check that the new name is actually available.

Revert "Fix a code snippet typo in asyncio docs (#108427)" (GH-111271)

This reverts commit 7f316763402a7d5556deecc3acd06cb719e189b3.

The change resulted in a tautology and should not have been made.  There
may be an opportunity for additional clarity in this section, but this
change wasn't it :)

Ref: https://github.com/python/cpython/pull/108427#issuecomment-1777525740

gh-111151: Convert monospaced directives to :ref: (#111152)

gh-75666: Tkinter: add tests for binding (GH-111202)

gh-97928: Change the behavior of tkinter.Text.count() (GH-98484)

It now always returns an integer if one or less counting options are specified.
Previously it could return a single count as a 1-tuple, an integer (only if
option "update" was specified) or None if no items found.
The result is now the same if wantobjects is set to 0.

gh-110019: Refactor summarize_stats (GH-110398)

Fix typo in sys docs (#111196)

Co-authored-by: Hugo van Kemenade <hugovk@users.noreply.github.com>

GH-94438: Restore ability to jump over None tests (GH-111237)

gh-110572: Remove `test_*` from `_testcapi/getargs.c` (GH-111214)

gh-109894: Fix initialization of static `MemoryError` in subinterpreter (gh-110911)

Fixes #109894

* set `interp.static_objects.last_resort_memory_error.args` to empty tuple to avoid crash on `PyErr_Display()` call
* allow `_PyExc_InitGlobalObjects()` to be called on subinterpreter init

---------

Co-authored-by: blurb-it[bot] <43283697+blurb-it[bot]@users.noreply.github.com>

gh-101100: Fix Sphinx warnings for `fileno` (#111118)

Add a version added note for PY_VECTORCALL_ARGUMENTS_OFFSET (#110963)

typo: missing line of output in pull parser example (#111068)

Fix typo in 3.13's whatsnew (#111215)

gh-105931: Fix surprising compileall stripdir behaviour (GH-108671)

Before, the '-s STRIPDIR' option on
compileall lead to some surprising results as it only strips away
path components that match, but leaves alone the non-matching ones
interspersed in between.

For example, with: python -m compileall -s/path/to/another/src
/path/to/build/src/file.py

The resulting written path will be: build/file.py

This fix only strips directories that are a fully matching prefix of the
source path. If a stripdir is provided that is not a valid prefix, a
warning will be displayed (which can be silenced with '-qq').

GH-109369: Add machinery for deoptimizing tier2 executors, both individually and globally. (GH-110384)

gh-67565: Remove redundant C-contiguity checks (GH-105521)

Co-authored-by: Stefan Krah <skrah@bytereef.org>

gh-110383: Italicize variable name (#111206)

gh-110383: Added explanation about simplest regex use case for quantifiers. (#111110)

Co-authored-by: Hugo van Kemenade <hugovk@users.noreply.github.com>

gh-110828: AIX 32bit build needs -latomic for _testcapi module (#110962)

gh-110196: Fix ipaddress.IPv6Address.__reduce__ (GH-110198)