auth, rec IXFR-in: Fix a case where an incomplete read caused by network error might result in a truncated zone.

As we might break from the loop early, we need to check if the end SOA was seen after the loop.
Also make sure we detect end conditions for both AXFR and IXFR style properly, to avoid processing
data after the end marker.

Merge pull request #11272 from Habbie/backport-11262-to-auth-4.6.x

auth-4.6.x: builder: migrate EL8 builds to oraclelinux, rename centos8 to el8 where possible

builder: add el-7 alias for centos-7

(cherry picked from commit 6bd3c9bb23f5dfc385a66647ab175ec2812d6617)

take centos 8-stream from quay

(cherry picked from commit 2f9edddc0c9c1f8a68e154f6c12e3fd214420563)

builder CI: switch oraclelinux-8 to el-8

cleanup

(cherry picked from commit 1b27721782ad3dc547ed448a257c59829ff0bd94)

builder: archs for oraclelinux-8; el-8 symlinks

(cherry picked from commit dee53cf16161a6c45560475b647de420842532ef)

Merge pull request #11235 from Habbie/backport-11197-to-auth-4.6.x

auth-4.6.x: Stop using the now deprecated and useless std::binary_function

Merge pull request #11233 from Habbie/backport-11196-to-auth-4.6.x

auth-4.6: Fix build with OpenSSL 3.0.0

Stop using the now deprecated and useless std::binary_function

It is no longer needed since the types can now be automatically
deduced, has been deprecated in C++11 and removed in C++17.

(cherry picked from commit 7587bcbea8a9cb3058cb2e6d7f6a2597494b6713)

Fix build with OpenSSL 3.0.0

(cherry picked from commit 8535f66672ec9d1eebf5835d3e53238973a80478)

Merge pull request #11206 from Habbie/backport-11090-to-auth-4.6.x

auth-4.6.x: show QType by name in log message

Merge pull request #11205 from Habbie/backport-11194-to-auth-4.6.x

auth 4.6.x swagger: add a syntax test and fix a few things

Merge pull request #11220 from mind04/pdns-bp-cds

auth-4.6.x: fix multiple CDS records in an AXFR

auth: test CDS multi digest  and removal

auth: test CDS with multiple keys

auth: fix multiple CDS records in an AXFR

auth: show QType by name in log message

(cherry picked from commit dd276e7ad94c977a0dbdd99ce30f17791f2bebb1)

auth CI: do swagger syntax check

(cherry picked from commit dab788a99bda44735699086a6f7557dca6de47ab)

auth swagger: fix some texts in the autoprimary bits

(cherry picked from commit 02c55fb7a0ea8288a881914404a60bab90d32c0d)

auth swagger: fix autoprimary format

(cherry picked from commit 6b79221666f4bfcea6bfccc3e9754c8df59406eb)

Merge pull request #11210 from Habbie/backport-11208-to-auth-4.6.x

auth-4.6.x: CI: dnspython 2.2.0 breaks auth and ixfrdist testing, pin to 2.1.0

CI: dnspython 2.2.0 breaks auth and ixfrdist testing, pin to 2.1.0

(cherry picked from commit 46a40ed033d64f58aa30013d7e68daa5b5e8d615)

Merge pull request #11182 from Habbie/auth-46-copyright-years

auth-4.6.x: bump copyright years to 2022

also bump ws-auth.cc copyright year

Bump copyright year

(cherry picked from commit 2d0db0d9655eb1474367cf0dc565ad8710dda507)

Merge pull request #11160 from mind04/auth46-bp-zonecache

auth-4.6.x: add zone removal to the zonecache

auth: add zone removal to the zonecache

Merge pull request #11145 from Habbie/backport-11144-to-auth-4.6.x

auth 4.6.x: pdnsutil edit-zone: fix n and e behaviour on increase-serial prompt, fixes #11142

Merge pull request #11159 from mind04/pdns-bp6-lmdb-lookup

auth-4.6.x: lmdb, check if the lookup name is part of the zone

Merge pull request #11161 from Habbie/backport-11102-to-auth-4.6.x

auth 4.6.x: add autoprimary management in API & pdnsutil #11102

auth: add autoprimary API test

(cherry picked from commit 1d9754ddebf3fa6e42f4ecf11f0e6101f27fcfd9)

auth: add support for autoprimary management via API and pdnsutil

(cherry picked from commit 782e9b24c390a954ab88fec1b1d019f200f9d448)

bindbackend: Document bind-supermaster-config

(cherry picked from commit 8a9ea70a3afc3958d3ae8d3864cc4ffb78de281b)

auth: lmdb, check if the lookup name is part of the zone

pdnsutil edit-zone: fix n and e behaviour on increase-serial prompt, fixes #11142

(cherry picked from commit fef0fbfc86aaeee03acf62c9d13af70f373679eb)

Merge pull request #11139 from mind04/pdns-bp-46x

Auth-4.6.x: backports

Merge pull request #11093 from Habbie/backport-11081-to-auth-4.6.x

auth-4.6.x: docker images: Remove capability requirements

Merge pull request #11086 from Habbie/auth46-remove-non-auth-ci

auth-4.6.x: do not run dnsdist/rec CI

auth: improve tcp exception handling

auth: lmdb: fix records removal in deleteDomain()

Additional note on Docker Engine version where the requirement of the additional capability was dropped

(cherry picked from commit 07b24e5743c08c828c73a93e724a86a5b83b680a)

Remove capability requirements from Docker images

(cherry picked from commit f28c81ed0242b6838eafdb61933a6f63b68040cf)

auth-4.6.x: do not run dnsdist/rec CI

Merge pull request #11073 from jsoref/grammar

Minor fixes

Minor fixes

Guided by app.grammarly.com

Merge pull request #11070 from omoerbeek/rec-regr-logs

rec: Regression tests: startup/cleanup fixes

Merge pull request #11068 from Habbie/bind-hybrid-zone-cache

auth: prevent bind-hybrid+zone-cache

Merge pull request #11067 from Habbie/pdnsutil-ds-sha1-verbose

pdnsutil: skip SHA1 DSes except in verbose mode, fixes #11045

Merge pull request #11066 from zeha/auth-api-zonecache-flush-small

Auth: add zone to zonecache on flush API endpoint

Merge pull request #11071 from PowerDNS/omoerbeek-patch-1

Wrong title of check

Merge pull request #11069 from omoerbeek/rec-no-eventtrace-on-no-lua

rec: Do not generate eventtrace records if no Lua hook is defined

Cleanup start and stop code

- more clearly print startup logs in case of exec error
- do not try to kill a process that's already dead
- do not call exit, but throw an AssertionError on startup issues

Also print logs on no exception

Wrong title of check

auth API: add zone to zonecache in flush endpoint

auth: prevent bind-hybrid+zone-cache, fixes #10658

auth API: purge entire zone from cache, not just zone-level records

Merge pull request #11064 from omoerbeek/docs-secpoll-status

secpoll: for pre-releases, use status 2 when supserseded.

Do not generate eventtrace records if no Lua hook is defined

pdnsutil: skip SHA1 DSes except in verbose mode, fixes #11045

For pre-releases, use status 2 when supserseded.

Merge pull request #11063 from omoerbeek/rec-prep-4.6.0-rc1

rec: Prep for rec-4.6.0-rc1

Merge pull request #11054 from rgacogne/ddist-fix-webserver-headers-doc

dnsdist: Fix 'custom_headers' -> 'customHeaders' in the webserver doc

Update pdns/recursordist/docs/changelog/4.6.rst

Co-authored-by: Remi Gacogne <github@coredump.fr>

Prep for rec-4.6.0-rc1

Merge pull request #10982 from omoerbeek/systemd-dir-env-cond

Condition to HAVE_SYSTEMD_WITH_RUNTIME_DIR_ENV is reversed

Condition to HAVE_SYSTEMD_WITH_RUNTIME_DIR_ENV is reversed

dnsdist: Fix 'custom_headers' -> 'customHeaders' in the webserver doc

`setWebserverConfig()` accepts a 'customHeaders' key, and not a
'custom_headers' one. Also update the documentation for `webserver()`
where it does not really matter so they are in sync.

Merge pull request #11039 from rgacogne/ddist-split-advanced-regression

dnsdist: Split the huge test_Advanced regression test file

Merge pull request #11043 from omoerbeek/rec-regr-fast-startup-teardown

rec: Regression tests: smarter and faster startup and teardown of auth and rec

Merge pull request #11050 from omoerbeek/rec-catch-guard-ex

rec: Catch an exception in guard destructor as seen by coverity.

Merge pull request #11033 from omoerbeek/circleci-drop-formatting

CircleCI: drop formatting check, superseded by GH workflows

Wait for web server to come online before proceeding

Set timeout on TCP connect attempt

Wait for webserver to come up

Wait until outgoing requests stabilizes before starting tests, rec might stil be busy resolving hints.

Smarter and faster startup and teardown of auth and rec

Instead of having a fixed 1 or 2s delay, poll the TCP port to see
if rec or auth has started up in a semi-tight loop: a loop with a
small sleep.  For teardown we poll the wait status using poll() in
a similar loop.

Catch an exception in guard destructor as seen by coverity.

Merge pull request #11046 from phonedph1/patch-31

Update dq.rst

Merge pull request #11047 from phonedph1/patch-32

Update dq.rst

Update dq.rst

Update dq.rst

Merge pull request #11044 from omoerbeek/rec-regr-auth-v6

rec: regression test: Fix v6 setup and start using a more modern auth on circleci

Fix error in test zone that auth-45 does not like

Merge pull request #11035 from rgacogne/ddist-17-beta2

dnsdist: Add ChangeLog and secpoll for 1.7.0-beta2

One more occurence of --local-ipv6

Merge pull request #11036 from omoerbeek/rec-qm-9156

rec: Compute step sizes for QM a la RFC 9156

Fix v6 setup and start using a more modern auth on circleci

Merge pull request #11042 from jsoref/recursordist-lua-scripting-doc-grammar

doc: grammar tweaks for recursordist lua-scripting

Apply suggestions from code review

Co-authored-by: Remi Gacogne <github@coredump.fr>

doc: grammar tweaks for recursordist lua-scripting

Merge pull request #11041 from omoerbeek/rec-lua-blocking-docs

rec: Warn about blocking calls from Lua

Warn about blocking calls from Lua

Merge pull request #11037 from rgacogne/ddist-healthcheck-reuse-tls-session

dnsdist: Reuse and save the TLS session tickets in DoT healthchecks

Alos drop formatting job from the global jobs:

Merge pull request #11030 from omoerbeek/rec-incoming-tcp-finalize

Rec incoming tcp bookkeeping

dnsdist: Use `time()` instead of `gettimeofday()`, as suggested by Otto

dnsdist: Split the huge test_Advanced regression test file

- The Lua FFI tests moved to `test_LuaFFI.py`
- the rules and actions to `test_RulesActions.py`
- and test_Advanced now contains only tests non directly related to
specific rules and actions

typo in comment

Co-authored-by: Remi Gacogne <github@coredump.fr>

Merge pull request #11038 from omoerbeek/rec-ci-mo-tsan-for-now

rec: Disable tsan regression runs for rec for now,

dnsdist: Update the outgoing DoT tests now that we save TLS tickets during healthchecks