bpo-44859: Improve error handling in sqlite3 and and raise more accurate exceptions. (GH-27654)

* MemoryError is now raised instead of sqlite3.Warning when
  memory is not enough for encoding a statement to UTF-8
  in Connection.__call__() and Cursor.execute().
* UnicodEncodeError is now raised instead of sqlite3.Warning when
  the statement contains surrogate characters
  in Connection.__call__() and Cursor.execute().
* TypeError is now raised instead of ValueError for non-string
  script argument in Cursor.executescript().
* ValueError is now raised for script containing the null
  character instead of truncating it in Cursor.executescript().
* Correctly handle exceptions raised when getting boolean value
  of the result of the progress handler.
* Add many tests covering different corner cases.

Co-authored-by: Erlend Egeberg Aasland <erlend.aasland@innova.no>

bpo-44830 - Remove the broken Broken Mozilla devguide link. (GH-27664)

bpo-44856: Possible reference leak in error paths of update_bases() and __build_class__ (GH-27647)

bpo-42971: Add errno.EQFULL (macOS) (GH-24419)

Co-authored-by: Łukasz Langa <lukasz@langa.pl>

bpo-41576: document BaseException in favor of bare except (GH-21917)

bpo-27752: improve documentation of csv.Dialect (GH-26795)

Co-authored-by: Łukasz Langa <lukasz@langa.pl>

bpo-44605: Teach @total_ordering() to work with metaclasses (GH-27633)

bpo-44839: Raise more specific errors in sqlite3 (GH-27613)

MemoryError raised in user-defined functions will now preserve
its type. OverflowError will now be converted to DataError.
Previously both were converted to OperationalError.

Upgrade bundled pip and setuptools (#27625)

pip is now 21.2.3
setuptools is now 57.4.0

bpo-44756: [docs] revert automated virtual environment creation on `make html` (GH-27635)

It turned out to be disruptive for downstream distributors.

bpo-44524: Fix an issue wherein `_GenericAlias._name` was not properly set for specialforms (GH-27614)

Co-authored-by: Ken Jin <28750310+Fidget-Spinner@users.noreply.github.com>
Co-authored-by: Łukasz Langa <lukasz@langa.pl>

bpo-44849: Fix os.set_inheritable() on FreeBSD 14 with O_PATH (GH-27623)

Fix the os.set_inheritable() function on FreeBSD 14 for file
descriptor opened with the O_PATH flag: ignore the EBADF error on
ioctl(), fallback on the fcntl() implementation.

bpo-40928: notify users running test_decimal on macOS of malloc warnings (GH-26783)

* When trying to allocate very large regions on macOS, malloc does not   fail silently. It sends a noisy error out to STDERR
* This provides a helper function to warn the user, and provides the warning for test_decimal, which consistently generates these warnings on macOS.

Co-authored-by: Łukasz Langa <lukasz@langa.pl>

bpo-44584: Deprecate PYTHONTHREADDEBUG env var (GH-27065)

The threading debug (PYTHONTHREADDEBUG environment variable) is
deprecated in Python 3.10 and will be removed in Python 3.12. This
feature requires a debug build of Python.

bpo-44679: [doc] fix typo in unittest.mock.rst (GH-27618)

bpo-44838: Refine the custom syntax errors for invalid 'if' expressions (GH-27615)

bpo-44291: Fix reconnection in logging.handlers.SysLogHandler (GH-26490)

bpo-44822: Don't truncate `str`s with embedded NULL chars returned by `sqlite3` UDF callbacks (GH-27588)

platform: Import subprocess in function. (GH-27610)

bpo-41706: Fix special method invocation docs to mention using type() (GH-22084)

bpo-42958: Improve description of shallow= in filecmp.cmp docs (GH-27166)

Co-authored-by: Łukasz Langa <lukasz@langa.pl>
Co-authored-by: Alexander Vandenbulcke <alexander.vandenbulcke95@gmail.com>

[doc] bpo-43066: zipfile - add note on leading slash in the filename arg (GH-26899)

Co-authored-by: Łukasz Langa <lukasz@langa.pl>

Fix typo in 'xml.dom.minidom' documentation (GH-27602)

bpo-44564 Move formatted assertion under deprecation warning context (GH-27090)

Fix 404 link to the pyporting mailing list (GH-27320)

Co-authored-by: Mariatta Wijaya <Mariatta@users.noreply.github.com>
Co-authored-by: Łukasz Langa <lukasz@langa.pl>

bpo-44801: Check arguments in substitution of ParamSpec in Callable (GH-27585)

Note that tp_clear and m_clear are not always called (GH-27581)

Fix hyperlink conflict in turtle docs (GH-27592)

bpo-41117: Cleanup subtract_refs() (GH-27593)

subtract_refs() reuses the 'op' variable rather than calling the
FROM_GC() macro twice.

Issue reported by William Pickard.

bpo-44821: Eagerly assign __dict__ for new objects. (GH-27589)

Add option to write specialization stats to files and script to summarize. (GH-27575)

* Add option to write stats to random file in a directory.

* Add script to summarize stats.

bpo-41886: Fix documented type of PyType_Type (GH-22454)

Ensure LICENSE.txt file is generated even in PGO builds (GH-27580)

bpo-44808: fixes test for interactive inspect getsource of a class (GH-27571)

Co-authored-by: Łukasz Langa <lukasz@langa.pl>

bpo-41737: expand doc for NotADirectoryError (GH-27471)

bpo-27275: Change popitem() and pop() methods of collections.OrderedDict (GH-27530)

* Unify the C and Python implementations of OrderedDict.popitem().

The C implementation no longer calls ``__getitem__`` and ``__delitem__``
methods of the OrderedDict subclasses.

* Change popitem() and pop() methods of collections.OrderedDict

For consistency with dict both implementations (pure Python and C)
of these methods in OrderedDict no longer call __getitem__ and
__delitem__ methods of the OrderedDict subclasses.

Previously only the Python implementation of popitem() did not
call them.

closes bpo-39091: Fix segfault when Exception constructor returns non-exception for gen.throw. (#17658)

Co-authored-by: Benjamin Peterson <benjamin@python.org>

bpo-44782: Improve OrderedDict recipe for LRU cache variants (GH-27536)

bpo-44792: Improve syntax errors for if expressions (GH-27506)

bpo-35183: Add typical examples to os.path.splitext docs (GH-27286)

Document PyMember_GetOne and PyMember_SetOne (GH-27555)

bpo-44806: Fix __init__ in subclasses of protocols (GH-27545)

Non-protocol subclasses of protocol ignore now the __init__ method
inherited from protocol base classes.

bpo-44785: Silence deprecation warnings in test_pickle (#27538)

build(deps): bump actions/stale from 3 to 4 (#27526)

Bumps [actions/stale](https://github.com/actions/stale) from 3 to 4.
- [Release notes](https://github.com/actions/stale/releases)
- [Changelog](https://github.com/actions/stale/blob/main/CHANGELOG.md)
- [Commits](https://github.com/actions/stale/compare/v3...v4)

Signed-off-by: dependabot[bot] <support@github.com>

bpo-44206: Make sure that dict-keys's version is set to zero when value is popped (GH-27542)

bpo-44808: Fix test_inspect in refleak mode (GH-27544)

doc: "Mac OS X" -> "macOS" (GH-27535)

doc: "Mac OS " -> "macOS" (GH-27534)

bpo-44781: make distutils test suppress deprecation warning from import distutils (GH-27485)

bpo-44793: Fix checking the number of arguments when subscribe a generic type with ParamSpec parameter. (GH-27515)

For example Callable[P, T][[int], str, float] will now raise an error.

Use also term "arguments" instead of "parameters" in error
message for too few/many arguments.

bpo-34013: Don't consider a grouped expression when reporting legacy print syntax errors (GH-27521)

bpo-33671 fix orphaned comment in shutil.copyfileobj (GH-27516)

bpo-44794: Merge tests for typing.Callable and collection.abc.Callable (GH-27507)

bpo-37880: for argparse add_argument with action='store_const', const now defaults to None. (GH-26707)

bpo-44784: Apply changes from importlib_metadata 4.6.3 (GH-27508)

Addressing issues with tests under error on warnings.

Automerge-Triggered-By: GH:jaraco

Divide the grammar into sections to improve readability (GH-27502)

Trivial typo in docstring

bpo-44667: Treat correctly lines ending with comments and no newlines in the Python tokenizer (GH-27499)

bpo-44771: Sync with importlib_resources 5.2.2, fixing refleak. (#27497)

* bpo-44771: Sync with importlib_resources 5.2.2, fixing refleak.

* Include new 'resources' dir in the Makefile.

bpo-44648: Fix error type in inspect.getsource() in interactive session (GH-27171)

bpo-43625: Enhance csv sniffer has_headers() to be more accurate (GH-26939)

bpo-42892: fix email multipart attribute error (GH-26903)

bpo-41911: Update docs for various expressions (GH-27470)

Co-authored-by: Łukasz Langa <lukasz@langa.pl>

bpo-44666: Use default encoding as fallback for compile_file (GH-27236)

When sys.stdout.encoding is None compile_file will fall back to
sys.getdefaultencoding to encode/decode error messages.

Co-authored-by: Stefan Hoelzl <stefan.hoelzl@posteo.de>
Co-authored-by: Mickaël Schoentgen <contact@tiger-222.fr>

Fail the CI if an optional module fails to compile (GH-27466)

Doc: Change errant 3.10.0 to 3.10, to match other mentions (GH-27459)

Update URLs in comments and metadata to use HTTPS (GH-27458)

bpo-44747: Refactor usage of sys._getframe at typing module (#27387)

Co-authored-by: Ken Jin <28750310+Fidget-Spinner@users.noreply.github.com>

bpo-44761: Change default value of NewType __module__ attr (GH-27406)

bpo-44753: Don't use logfile extension when determining old files to be deleted (GH-27475)

bpo-44771: Apply changes from importlib_resources 5.2.1 (GH-27436)

* bpo-44771: Apply changes from importlib_resources@3b24bd6307

* Add blurb

* Exclude namespacedata01 from eol conversion.

Add missing gdbm dependencies to the UNIX CI (GH-27467)

bpo-31746: Fix broken call in GH-27431 (GH-27464)

bpo-44479: Do not regenerate files during a PGO build as it will invalidate the profile. (GH-27460)

Minor fixes to specialization stats. (GH-27457)

* Use class, not value for fail stats for BINARY_SUBSCR.

* Fix counts for unquickened instructions.

bpo-31746: Prevent segfaults when sqlite3.Connection is uninitialised (GH-27431)

bpo-44662: Add ability to annotate types.Union (#27214)

Co-authored-by: Ken Jin <28750310+Fidget-Spinner@users.noreply.github.com>

Fix typo in ast.rst (GH-27449)

Co-authored-by: HaeckelK <haeckelk.github@gmail.com>

To fix the random failed test cases of test___xxsubinterpreters in multiprocess. (GH-27240)

bpo-44765: [doc] fix typo (GH-27430)

bpo-44725 : expose specialization stats in python (GH-27192)

bpo-44752: refactor part of rlcompleter.Completer.attr_matches (GH-27433)

bpo-44752: Make rlcompleter not call `@property` methods (GH-27401)

* rlcompleter was calling these methods to identify whether to add
  parenthesis to the completion, based on if the attribute is callable.
* for property objects, completion with parenthesis are never desirable.
* property methods with print statements behaved very strangely, which
  was especially unfriendly to language newcomers. <tab> could suddenly
  produce output unexpectedly.

bpo-44707: Fix an undefined behavior of the null pointer arithmetic (GH-27292)

bpo-41103: Resurrect the old buffer protocol. (GH-27437)

Revert "bpo-41103: Remove old buffer protocol support (#21117)"

This reverts commit 6f8a6ee59cb7f99f68df8ee9c3e8c8cf19af3eed.

bpo-42064: Optimise `sqlite3` state access, part 1 (GH-27273)

Prepare for module state:

- Add "get state by defining class" and "get state by module def" stubs
- Add AC defining class when needed
- Add state pointer to connection context
- Pass state as argument to utility functions

Automerge-Triggered-By: GH:encukou

bpo-43565: Document PyUnicode_KIND's return type as an unsigned int (GH-25724)

bpo-42035: Add a PyType_GetName() to get type's short name. (GH-23903)

bpo-44688: Remove ASCII limitation from `sqlite3` collation names (GH-27395)

bpo-43897: Reject "_" captures and top-level MatchStar in the AST validator (GH-27432)

bpo-40263: Fixes an off-by-one error in _winapi_WaitForMultipleObjects_impl (GH-19501)

bpo-43897: AST validation for pattern matching nodes (GH24771)

bpo-44682: Handle invalid arg to pdb's "commands" directive (#27252)

bpo-44763: [doc] remove repetitive sentence from textwrap.wrap (GH-27423)

bpo-44544: [doc] list all textwrap func kwargs (GH-26999)

bpo-27827: identify a greater range of reserved filename on Windows. (GH-26698)

`pathlib.PureWindowsPath.is_reserved()` now identifies as reserved
filenames with trailing spaces or colons.

Co-authored-by: Barney Gale <barney.gale@foundry.com>
Co-authored-by: Eryk Sun <eryksun@gmail.com>

Add missing end of sentence in docs (GH-27280)

Fix typo in sqlite3.rst (GH-27415)

preceeding -> preceding

Change type check to isinstance in pipes (GH-27291)

Spell out 's.pop() or s.pop(i)' (GH-27398)