Python 3.11.0a6

bpo-46940: Don't override existing AttributeError suggestion information (GH-31710)

When an exception is created in a nested call to PyObject_GetAttr, any
external calls will override the context information of the
AttributeError that we have already placed in the most internal call.
This will cause the suggestions we create to nor work properly as the
attribute name and object that we will be using are the incorrect ones.

To avoid this, we need to check first if these attributes are already
set and bail out if that's the case.

bpo-46937: convert remaining functions to AC in _weakref (GH-31705)

bpo-43292: Fix file leak in `ET.iterparse()` when not exhausted (GH-31696)

Co-authored-by: Serhiy Storchaka <storchaka@gmail.com>

Use assertEqual, not assertEquals, in test_unicode (GH-31718)

Fixes a DeprecationWarning

Clean up CODEOWNERS (#31715)

crypto-team apparently doesn't exist and skrah no longer has write access. Thanks @isidentical for noticing this.

bpo-45582: Don't fail if ENV_PATH is None in getpath.py (GH-31699)

Update grammar_grapher with the new forced (&&) directive (#31704)

bpo-14156: Make argparse.FileType work correctly for binary file modes when argument is '-' (GH-13165)

Also made modes containing 'a' or 'x' act the same as a mode containing 'w' when argument is '-'
(so 'a'/'x' return sys.stdout like 'w', and 'ab'/'xb' return sys.stdout.buffer like 'wb').

bpo-46921: Vectorcall support for `super()` (GH-31687)

Co-Authored-By: Dong-hee Na <donghee.na@python.org>

bpo-46864: Deprecate PyBytesObject.ob_shash. (GH-31598)

Remove trailing spaces (GH-31695)

bpo-46927: Include the type's name in the error message for subscripting non-generic types (GH-31694)

Lib/typing.py copy edits originating from GH-31061 (#31684)

bpo-38738: Fix formatting of True and False in the threading documentation (GH-31678)

* Fix formatting of True and False in the threading documentation
* Update threading.rst

bpo-46841: Fix BINARY_OP's handling of inline caches (GH-31671)

bpo-25415: Remove confusing sentence from IOBase docstrings (PR-31631)

bpo-46541: Remove usage of _Py_IDENTIFIER from lzma module (GH-31683)

bpo-46841: Fix error message hacks in `GET_AWAITABLE` (GH-31664)

bpo-46903: Handle str-subclasses in virtual instance dictionaries. (GH-31658)

bpo-46744: Move Windows ARM64 installation directory to correct ProgramFiles (GH-31677)

bpo-46355: Update pythoncapi_compat project URL (GH-31670)

bpo-46913: Skip test_ctypes.test_shorts() on UBSan (GH-31674)

If Python is built with UBSan, test_ctypes now skips test_shorts().
This change allows to run test_ctypes to check for new UBSan regression,
but the known test_shorts() undefined behavior must be fixed.

bpo-46913: test_hashlib skips _sha3 tests on UBSan (GH-31673)

If Python is built with UBSan, test_hashlib skips tests on the _sha3
extension which currently has undefined behaviors.

This change allows to run test_hashlib to check for new UBSan regression,
but the known _sha3 undefined behavior must be fixed.

bpo-46841: Use inline caching for attribute accesses (GH-31640)

bpo-46913: Fix test_faulthandler.test_read_null() on UBSan (GH31672)

Disable undefined behavior sanitizer (UBSan) on
faulthandler._read_null().

bpo-45459: Use type names in the internal C API (GH-31669)

Replace "struct xxx" with "xxx" types in the internal C API.

bpo-45459: Fix PyModuleDef_Slot type in the limited C API (GH-31668)

Move the type definition to pytypedefs.h.

bpo-46913: Fix test_faulthandler.test_sigfpe() on UBSAN (GH-31662)

Disable undefined behavior sanitizer (UBSAN) on
faulthandler_sigfpe().

bpo-46841: Improve the failure stats for COMPARE_OP (GH-31663)

bpo-46877: export unittest.doModuleCleanups in unittest package (#31613)

Move check for str-only keys in LOAD_GLOBAL specializations to specialization time. (GH-31659)

bpo-6634: [doc] clarify that sys.exit() does not always exit the interpreter (GH-31639)

bpo-46874: Speed up sqlite3 user-defined aggregate 'step' method (GH-31604)

bpo-46891: Fix creating a new instance of a module subclass with slots (GH-31643)

Fix EncodingWarning in libregrtest (GH-31654)

bpo-46831: Update __build_class__ comment (#31522)

Co-authored-by: Jelle Zijlstra <jelle.zijlstra@gmail.com>

dict: Fix refleak (GH-31650)

bpo-46643: fix NEWS entry (GH-31651)

bpo-40116: dict: Add regression test for iteration order. (GH-31550)

bpo-21910: Clarify docs for codecs writelines method (GH-31245)

Co-authored-by: Jelle Zijlstra <jelle.zijlstra@gmail.com>

bpo-46643: Fix stringized P.args/P.kwargs with get_type_hints (GH-31238)

bpo-46860: Respect `--with-suffix` on case-insensitive file systems (GH-31593)

Previously, case-insensitive file systems were forced to use `.exe` as the file suffix no matter what `--with-suffix` was set to.

bpo-45492: Corrected documentation for co_names in inspect library doc (GH-31456)

bpo-46848: Move _PyBytes_Find() to internal C API (GH-31642)

Move _PyBytes_Find() and _PyBytes_ReverseFind() functions to the
internal C API.

bytesobject.c now includes pycore_bytesobject.h.

dict: Internal cleanup (GH-31641)

* Make empty_key from split table to combined table.
* Use unicode_get_hash() when possible.

bpo-46195: Do not add `Optional` in `get_type_hints` (GH-30304)

Co-authored-by: Ken Jin <28750310+Fidget-Spinner@users.noreply.github.com>
Co-authored-by: Jelle Zijlstra <jelle.zijlstra@gmail.com>

bpo-46848: Use stringlib/fastsearch in mmap (GH-31625)

Speed up mmap.find(). Add _PyBytes_Find() and _PyBytes_ReverseFind().

bpo-46845: Reduce dict size when all keys are Unicode (GH-31564)

bpo-46712: Let generate_global_objects.py Run on Earlier Python Versions (gh-31637)

https://bugs.python.org/issue46712

bpo-46841: Use inline cache for `BINARY_SUBSCR`. (GH-31618)

bpo-46541: remove usage of _Py_IDENTIFIER from _ssl module (GH-31599)

bpo-46633: Skip tests on ASAN and/or MSAN builds (GH-31632)

Skip tests on ASAN and/or MSAN builds:

* multiprocessing tests
* test___all__
* test_concurrent_futures
* test_decimal
* test_peg_generator
* test_tools

The ASAN job of GitHub Actions no longer excludes these tests.

bpo-46541: Remove usage of _Py_IDENTIFIER from multibytecodec (GH-31475)

bpo-46311: Clean up PyLong_FromLong and PyLong_FromLongLong (GH-30496)

bpo-46841: Use inline caching for `COMPARE_OP` (GH-31622)

compiler: Merge except_table and cnotab (GH-31614)

Add missing "to" to two tp_flags notes (GH-31624)

bpo-46771: Remove two controversial lines from Task.cancel() (GH-31623)

Also from the _asyncio C accelerator module,
and adjust one test that the change caused to fail.

For more discussion see the discussion starting here:
https://github.com/python/cpython/pull/31394#issuecomment-1053545331

(Basically, @asvetlov proposed to return False from cancel()
when there is already a pending cancellation, and I went along,
even though it wasn't necessary for the task group implementation,
and @agronholm has come up with a counterexample that fails
because of this change.  So now I'm changing it back to the old
semantics (but still bumping the counter) until we can have a
proper discussion about this.)

bpo-46753: Add the empty tuple to the _PyRuntimeState.global_objects. (gh-31345)

https://bugs.python.org/issue46753

Statistics internals: Make fewer calls to _coerce() when data types are mixed (GH-31619)

bpo-45431: Rename CFrame to _PyCFrame in the C API (GH-31584)

Rename also struct _cframe to struct _PyCFrame.

Add a comment suggesting using public functions rather than using
directly the private _PyCFrame structure.

bpo-46841: Move the cache for `LOAD_GLOBAL` inline. (GH-31575)

bpo-46567: Add Tcl/Tk build for Windows ARM64 (GH-31574)

bpo-46841: Use inline caching for `UNPACK_SEQUENCE` (GH-31591)

bpo-46541: Remove unneeded visits from sqlite3 (GH-31609)

bpo-46541: Remove unnecessary Py_VISIT (GH-31608)

bpo-46786: Make ElementTree write the HTML tags embed, source, track, wbr as empty tags (GH-31406)

See https://html.spec.whatwg.org/multipage/syntax.html#void-elements
for reference.

bpo-46852: Restore test_getformat() test (GH-31601)

bpo-46857: Fix refleak in OSError INIT_ALIAS() (GH-31594)

_Py_GetRefTotal() no longer decrements _PySet_Dummy refcount.

bpo-46748: Fix ctypes test_frozentable() (GH-31600)

bpo-46606: os.getgroups() doesn't overallocate (GH-31569)

[doc] Add a note in howto/logging.rst about "do not log to root logger in libraries" (GH-31271)

Propagate errors (however unlikely) from _Py_Deepfreeze_Init() (GH-31596)

Taskgroup tweaks (GH-31559)

Now uses .cancel()/.uncancel(), for even fewer broken edge cases.

bpo-44011: Document ssl_shutdown_timeout added by revisited asyncio SSL implementation  (GH-31597)

bpo-38415: Remove redundant AsyncContextDecorator.__call__ override from _AsyncGeneratorContextManager (GH-30233)

bpo-45735: Promise the long-time truth that `args=list` works (GH-30982)

For threads, and for multiprocessing, it's always been the case that ``args=list`` works fine when passed to ``Process()`` or ``Thread()``, and such code is common in the wild. But, according to the docs, only a tuple can be used. This brings the docs into synch with reality.

Doc changes by Charlie Zhao.
Co-authored-by: Tim Peters <tim.peters@gmail.com>

bpo-46852: Remove the float.__set_format__() method (GH-31585)

Remove the undocumented private float.__set_format__() method,
previously known as float.__set_format__() in Python 3.7. Its
docstring said: "You probably don't want to use this function. It
exists mainly to be used in Python's test suite."

bpo-46816: Remove declarations for non-__STDC__ compilers (GH-31466)

After Python switched to C11, there is a guarantee that every compiler
conforms to ISO C so checks of __STDC__ have no sense.

bpo-46712: Share global string identifiers in deepfreeze (GH-31261)

Where appropriate, deepfreeze.c now uses `&_Py_ID(blah)` references instead of locally defining constants. This saves some space.

bpo-46857: Fix test_embed.test_no_memleak() on Windows (GH-31589)

Tolerate a leak of 1 reference and 1 memory block until it's fixed.

bpo-26897: Clarify Popen stdin, stdout, stderr file object docs (GH-30231)

bpo-46836: Rename InterpreterFrame to _PyInterpreterFrame (GH-31583)

Rename also struct _interpreter_frame to struct _PyInterpreterFrame.

Reduce risk of name conflicts if a project includes pycore_frame.h.

bpo-45316: Move _PyArg_Fini() to internal C API (GH-31580)

Move the private unexported _PyArg_Fini() function to the internal C
API: to the pycore_pylifecycle.h header file.

bpo-45316: Move private functions to internal C API (GH-31579)

Move the unexported private functions to the internal C API:

* pycore_frame.h: _PyFrame_New_NoTrack()
* pycore_function.h: _PyFunction_GetVersionForCurrentState()
* pycore_genobject.h: _PyAsyncGenValueWrapperNew()
* pycore_genobject.h: _PyCoro_GetAwaitableIter()
* pycore_genobject.h: _PyGen_yf()

Update dict/OrderedDict differences with code equivalents. (GH-31563)

bpo-45316: Move private PyDict functions to internal C API (GH-31577)

Move the following private unexported functions to the internal C API
headers:

* _PyDictKeys_GetVersionForCurrentState()
* _PyDictKeys_StringLookup()
* _PyDict_FromKeys()
* _PyDict_GetItemHint()
* _PyDict_KeysSize()
* _PyDict_LoadGlobal()
* _PyDict_NewKeysForClass()
* _PyDict_Pop_KnownHash()
* _PyDict_SetItem_Take2()
* _PyObjectDict_SetItem()
* _PyObject_MakeDictFromInstanceAttributes()
* _Py_dict_lookup()

bpo-45316: Move private PyCode C API to internal C API (GH-31576)

Rename private functions (no exported), add an underscore prefix:

* PyLineTable_InitAddressRange() => _PyLineTable_InitAddressRange()
* PyLineTable_NextAddressRange() => _PyLineTable_NextAddressRange()
* PyLineTable_PreviousAddressRange() => _PyLineTable_PreviousAddressRange()

Move private functions to the internal C API:

* _PyCode_Addr2EndLine()
* _PyCode_Addr2EndOffset()
* _PyCode_Addr2Offset()
* _PyCode_InitAddressRange()
* _PyCode_InitEndAddressRange(
* _PyLineTable_InitAddressRange()
* _PyLineTable_NextAddressRange()
* _PyLineTable_PreviousAddressRange()

No longer export the following internal functions:

* _PyCode_GetVarnames()
* _PyCode_GetCellvars()
* _PyCode_GetFreevars()
* _Py_GetSpecializationStats()

Add "extern" to pycore_code.h functions to identify them more easiliy
(they are still not exported).

bpo-46808: remove NEXT_BLOCK() from compile.c (GH-31448)

bpo-46841: Use *inline* caching for `BINARY_OP` (GH-31543)

bpo-46836: Move PyFrameObject to pycore_frame.h (GH-31530)

Move the PyFrameObject type definition (struct _frame) to the
internal C API pycore_frame.h header file.

bpo-1635741: Fix winreg reference leaks (GH-31560)

Clear also the PyHKEY_Type static type at exit.

bpo-46756: Fix authorization check in urllib.request (GH-31353)

Fix a bug in urllib.request.HTTPPasswordMgr.find_user_password() and
urllib.request.HTTPPasswordMgrWithPriorAuth.is_authenticated() which
allowed to bypass authorization. For example, access to URI "example.org/foobar"
was allowed if the user was authorized for URI "example.org/foo".

bpo-34429: Noted TemporaryFile behavior on non-Posix/non-Cygwin systems (GH-31547)

bpo-46748: Don't import <stdbool.h> in public headers (GH-31553)

<stdbool.h> is the standard/modern way to define embedd/extends Python free to define bool, true and false, but there are existing applications that use slightly different redefinitions, which fail if the header is included.

It's OK to use stdbool outside the public headers, though.

https://bugs.python.org/issue46748

bpo-46820: Refactor tests for ambiguous end of numerical literal (GH-31494)

bpo-46606: Remove redundant +1. (GH-31561)

bpo-46852: Rename float.__set_format__() to float.__setformat__() (GH-31558)

Rename the private undocumented float.__set_format__() method to
float.__setformat__() to fix a typo introduced in Python 3.7. The
method is only used by test_float.

The change enables again test_float tests on the float format which
were previously skipped because of the typo.

The typo was introduced in Python 3.7 by bpo-20185
in commit b5c51d3dd95bbfde533655fb86ac0f96f771ba7b.

bpo-46656: Remove Py_NO_NAN macro (GH-31160)

Building Python now requires support for floating point Not-a-Number
(NaN): remove the Py_NO_NAN macro.