bpo-44935: enable posix_spawn() on Solaris (GH-27795)

Enable posix_spawn() on Solaris

bpo-44698: Restore complex pow behaviour for small integral exponents (GH-27772)

bpo-44895: Introduce PYTHONDUMPREFSFILE variable for refcount dumping (GH-27767)

bpo-44889: Specialize LOAD_METHOD with PEP 659 adaptive interpreter (GH-27722)

Adds four new instructions:

* LOAD_METHOD_ADAPTIVE
* LOAD_METHOD_CACHED
* LOAD_METHOD_MODULE
* LOAD_METHOD_CLASS

bpo-42035: Enhance test_get_type_name() of _testcapi (GH-27649)

bpo-42035: Add PyType_GetQualName() to get a type's qualified name. (GH-27551)

bpo-44903: Removed othergui.rst and list of GUI frameworks (GH-27762)

bpo-38956: don't print BooleanOptionalAction's default twice (GH-27672)

Co-authored-by: Micky Yun Chan <michan@redhat.com>

bpo-44914: Add tests for some invariants of tp_version_tag (GH-27774)

Fix a SystemError in code.replace() (#27771)

While the comment said 'We don't bother resizing localspluskinds',
this would cause .replace() to crash when it happened.
(Also types.CodeType(), but testing that is tedious, and this tests all
code paths.)

bpo-44852: Support ignoring specific DeprecationWarnings wholesale in regrtest (GH-27634)

bpo-44900: Add five superinstructions. (GH-27741)

* LOAD_FAST LOAD_FAST
* STORE_FAST LOAD_FAST
* LOAD_FAST LOAD_CONST
* LOAD_CONST LOAD_FAST
* STORE_FAST STORE_FAST

bpo-44914: Maintain invariants of type version tags. (GH-27773)

* Do not invalidate type versions unnecessarily.

bpo-44895: skip test_no_hang_on_context_chain_cycle2 until the refleak is fixed (GH-27761)

bpo-44911: Fixed IsolatedAsyncioTestCase from throwing an exception on leaked tasks (GH-27765)

bpo-16580: [doc] Add examples to int.to_bytes and int.from_bytes (GH-27760)

* added code equivs. for to_bytes and from_bytes

Based on woparry's patch[1] from the relevant issue thread[2].

[1]: https://bugs.python.org/file30372/issue16580.patch
[2]: https://bugs.python.org/issue16580

Co-authored-by: Mark Dickinson <dickinsm@gmail.com>

bpo-44907: Update error messages in tutorial examples (GH-27755)

bpo-30077: Add support for Apple aifc/sowt pseudo-compression (GH-24449)

Co-authored-by: Toby Thurston <thurston@eml.cc>

bpo-36700: [doc] Update base64 RFC references to RFC 4648 (GH-27700)

Co-authored-by: Łukasz Langa <lukasz@langa.pl>

bpo-26228: [doc] Adapt PTY documentation updates from GH-4167 (GH-27754)

Co-authored-by: Cornelius Diekmann <c.diekmann@googlemail.com>

Added test case based on recommended test cases from RFC 4648 (GH-27747)

bpo-44891: Tests `id` preserving on `* 1` for `str` and `bytes` (GH-27745)

Co-authored-by: Łukasz Langa <lukasz@langa.pl>

bpo-44895: Temporarily add an extra gc.collect() call (GH-27746)

This is part of an investigation of a non-deterministic reference leak. While we're looking for the root cause, this is included temporarily so that CI doesn't fail on this particular issue. This enables it to find other regressions in the meantime, which would otherwise be shadowed by our known issue.

bpo-43392: Optimize repeated calls to `__import__()` (GH-24735)

Implements a two steps check in `importlib._bootstrap._find_and_load()` to avoid locking when the module has been already imported and it's ready.

---

Using `importlib.__import__()`, after this, does show a big difference:

Before:
```
$ ./python -c 'import timeit; print(timeit.timeit("__import__(\"timeit\")", setup="from importlib import __import__"))'
15.92248619502061
```

After:
```
$ ./python -c 'import timeit; print(timeit.timeit("__import__(\"timeit\")", setup="from importlib import __import__"))'
1.206068897008663
```

---

Update pegen to use the latest upstream developments (GH-27586)

bpo-44885: Correct the ast locations of f-strings with format specs and repeated expressions (GH-27729)

bpo-44890: Fix AMD build error (GH-27740)

bpo-44890: collect specialization stats if Py_DEBUG (GH-27731)

bpo-44878: Remove loop from interpreter. All dispatching is done by gotos. (GH-27727)

bpo-33930: Fix typo in the test name. (#27733)

bpo-33930: Fix typo in the test name. (GH-27733)

bpo-26228: Fix pty EOF handling (GH-12049)

On non-Linux POSIX platforms, like FreeBSD or macOS,
the FD used to read a forked PTY may signal its exit not
by raising an error but by sending empty data to the read
syscall. This case wasn't handled, leading to hanging
`pty.spawn` calls.

Co-authored-by: Reilly Tucker Siemens <reilly@tuckersiemens.com>
Co-authored-by: Łukasz Langa <lukasz@langa.pl>

Update test__opcode and _Py_GetSpecializationStats with recent specialization stat changes (GH-27728)

bpo-33479: Add architecture and threading model sections to Tkinter module docs (GH-27717)

Co-authored-by: Łukasz Langa <lukasz@langa.pl>

bpo-44878: Remove the switch from the main interpreter loop when using computed gotos. (GH-27726)

* Refactor dispatch logic to make flow of control clearer. Moves lltrace and dxprofile instrumentation into DISPATCH macro.

* Remove switch in interpreter loop when using computed gotos. There is no need for two nearly-duplicate dispatch tables.

bpo-44878:  _PyEval_EvalFrameDefault readability improvements (GH-27725)

* Move a few variable declarations to point of definition.

* Factor out tracing of function entry into helper function.

Add .DS_Store on ignore (GH-27711)

Co-authored-by: Łukasz Langa <lukasz@langa.pl>

Add missing DISPATCH() (GH-27715)

bpo-33930: Fix segfault with deep recursion when cleaning method objects (GH-27678)

bpo-44854: Add .editorconfig file to help enforce `make patchcheck` (GH-27638)

Classify specialization failures. Provides more useful stats, with lower overhead. (GH-27701)

Fix stats for STORE_ATTR specialization. (GH-27708)

bpo-25782: avoid hang in PyErr_SetObject when current exception has a cycle in its context chain (GH-27626)

Co-authored-by: Dennis Sweeney 36520290+sweeneyde@users.noreply.github.com

bpo-33479: Remove unqualified tkinter threadsafe claim. (GH-6990)

It has not been true for several years and likely never was.

make lib2to3 parse async generators everywhere (GH-6588)

bpo-14853: add back the stdin test, skip if stdin is redirected (GH-27694)

bpo-39498 Start linking the security warnings in the stdlib modules (GH-18272)

Co-authored-by: Łukasz Langa <lukasz@langa.pl>

bpo-44854: Remove trailing whitespaces (GH-27689)

bpo-44872: use new trashcan macros in framobject.c (#27683)

bpo-41402: Fix email ContentManager calling .encode() on bytes (GH-21631)

bpo-38840: Incorrect __all__ in multiprocessing.managers (GH-18034)

This was causing test___all__ to fail on platforms lacking a shared
memory implementation.

Co-Authored-By: Xavier de Gaye <xdegaye@gmail.com>
Co-authored-by: Łukasz Langa <lukasz@langa.pl>

bpo-44522: Fix inaccurate information in open() function (GH-27650)

- Use "Low surrogate code units" instead of "Unicode Private Use Area"

Remove unused variable. (GH-27677)

bpo-44702: Remove ambiguity in sentence (GH-27676)

Automerge-Triggered-By: GH:pablogsal

bpo-32695: Docs and tests for compresslevel and preset kwargs in tarfile (GH-21470)

Co-Authored-By: Bo Bayles <bbayles@gmail.com>

bpo-44826: Specialize STORE_ATTR (GH-27590)

* Generalize cache names for LOAD_ATTR to allow store and delete specializations.

* Factor out specialization of attribute dictionary access.

* Specialize STORE_ATTR.

bpo-44840: Compiler: Move duplication of exit blocks with no line numbers to after CFG optimization. (GH-27656)

bpo-42053: Remove misleading check in os.fwalk() (GH-27669)

os.fwalk() does not support integer as the first argument,
and never supported.

bpo-44859: Improve error handling in sqlite3 and and raise more accurate exceptions. (GH-27654)

* MemoryError is now raised instead of sqlite3.Warning when
  memory is not enough for encoding a statement to UTF-8
  in Connection.__call__() and Cursor.execute().
* UnicodEncodeError is now raised instead of sqlite3.Warning when
  the statement contains surrogate characters
  in Connection.__call__() and Cursor.execute().
* TypeError is now raised instead of ValueError for non-string
  script argument in Cursor.executescript().
* ValueError is now raised for script containing the null
  character instead of truncating it in Cursor.executescript().
* Correctly handle exceptions raised when getting boolean value
  of the result of the progress handler.
* Add many tests covering different corner cases.

Co-authored-by: Erlend Egeberg Aasland <erlend.aasland@innova.no>

bpo-44830 - Remove the broken Broken Mozilla devguide link. (GH-27664)

bpo-44856: Possible reference leak in error paths of update_bases() and __build_class__ (GH-27647)

bpo-42971: Add errno.EQFULL (macOS) (GH-24419)

Co-authored-by: Łukasz Langa <lukasz@langa.pl>

bpo-41576: document BaseException in favor of bare except (GH-21917)

bpo-27752: improve documentation of csv.Dialect (GH-26795)

Co-authored-by: Łukasz Langa <lukasz@langa.pl>

bpo-44605: Teach @total_ordering() to work with metaclasses (GH-27633)

bpo-44839: Raise more specific errors in sqlite3 (GH-27613)

MemoryError raised in user-defined functions will now preserve
its type. OverflowError will now be converted to DataError.
Previously both were converted to OperationalError.

Upgrade bundled pip and setuptools (#27625)

pip is now 21.2.3
setuptools is now 57.4.0

bpo-44756: [docs] revert automated virtual environment creation on `make html` (GH-27635)

It turned out to be disruptive for downstream distributors.

bpo-44524: Fix an issue wherein `_GenericAlias._name` was not properly set for specialforms (GH-27614)

Co-authored-by: Ken Jin <28750310+Fidget-Spinner@users.noreply.github.com>
Co-authored-by: Łukasz Langa <lukasz@langa.pl>

bpo-44849: Fix os.set_inheritable() on FreeBSD 14 with O_PATH (GH-27623)

Fix the os.set_inheritable() function on FreeBSD 14 for file
descriptor opened with the O_PATH flag: ignore the EBADF error on
ioctl(), fallback on the fcntl() implementation.

bpo-40928: notify users running test_decimal on macOS of malloc warnings (GH-26783)

* When trying to allocate very large regions on macOS, malloc does not   fail silently. It sends a noisy error out to STDERR
* This provides a helper function to warn the user, and provides the warning for test_decimal, which consistently generates these warnings on macOS.

Co-authored-by: Łukasz Langa <lukasz@langa.pl>

bpo-44584: Deprecate PYTHONTHREADDEBUG env var (GH-27065)

The threading debug (PYTHONTHREADDEBUG environment variable) is
deprecated in Python 3.10 and will be removed in Python 3.12. This
feature requires a debug build of Python.

bpo-44679: [doc] fix typo in unittest.mock.rst (GH-27618)

bpo-44838: Refine the custom syntax errors for invalid 'if' expressions (GH-27615)

bpo-44291: Fix reconnection in logging.handlers.SysLogHandler (GH-26490)

bpo-44822: Don't truncate `str`s with embedded NULL chars returned by `sqlite3` UDF callbacks (GH-27588)

platform: Import subprocess in function. (GH-27610)

bpo-41706: Fix special method invocation docs to mention using type() (GH-22084)

bpo-42958: Improve description of shallow= in filecmp.cmp docs (GH-27166)

Co-authored-by: Łukasz Langa <lukasz@langa.pl>
Co-authored-by: Alexander Vandenbulcke <alexander.vandenbulcke95@gmail.com>

[doc] bpo-43066: zipfile - add note on leading slash in the filename arg (GH-26899)

Co-authored-by: Łukasz Langa <lukasz@langa.pl>

Fix typo in 'xml.dom.minidom' documentation (GH-27602)

bpo-44564 Move formatted assertion under deprecation warning context (GH-27090)

Fix 404 link to the pyporting mailing list (GH-27320)

Co-authored-by: Mariatta Wijaya <Mariatta@users.noreply.github.com>
Co-authored-by: Łukasz Langa <lukasz@langa.pl>

bpo-44801: Check arguments in substitution of ParamSpec in Callable (GH-27585)

Note that tp_clear and m_clear are not always called (GH-27581)

Fix hyperlink conflict in turtle docs (GH-27592)

bpo-41117: Cleanup subtract_refs() (GH-27593)

subtract_refs() reuses the 'op' variable rather than calling the
FROM_GC() macro twice.

Issue reported by William Pickard.

bpo-44821: Eagerly assign __dict__ for new objects. (GH-27589)

Add option to write specialization stats to files and script to summarize. (GH-27575)

* Add option to write stats to random file in a directory.

* Add script to summarize stats.

bpo-41886: Fix documented type of PyType_Type (GH-22454)

Ensure LICENSE.txt file is generated even in PGO builds (GH-27580)

bpo-44808: fixes test for interactive inspect getsource of a class (GH-27571)

Co-authored-by: Łukasz Langa <lukasz@langa.pl>

bpo-41737: expand doc for NotADirectoryError (GH-27471)

bpo-27275: Change popitem() and pop() methods of collections.OrderedDict (GH-27530)

* Unify the C and Python implementations of OrderedDict.popitem().

The C implementation no longer calls ``__getitem__`` and ``__delitem__``
methods of the OrderedDict subclasses.

* Change popitem() and pop() methods of collections.OrderedDict

For consistency with dict both implementations (pure Python and C)
of these methods in OrderedDict no longer call __getitem__ and
__delitem__ methods of the OrderedDict subclasses.

Previously only the Python implementation of popitem() did not
call them.

closes bpo-39091: Fix segfault when Exception constructor returns non-exception for gen.throw. (#17658)

Co-authored-by: Benjamin Peterson <benjamin@python.org>

bpo-44782: Improve OrderedDict recipe for LRU cache variants (GH-27536)

bpo-44792: Improve syntax errors for if expressions (GH-27506)

bpo-35183: Add typical examples to os.path.splitext docs (GH-27286)

Document PyMember_GetOne and PyMember_SetOne (GH-27555)

bpo-44806: Fix __init__ in subclasses of protocols (GH-27545)

Non-protocol subclasses of protocol ignore now the __init__ method
inherited from protocol base classes.

bpo-44785: Silence deprecation warnings in test_pickle (#27538)