rec: limit the number of async tasks pushed to resolve NS names

Plus: as we only use a limited set of NS names for resolving,
processing all additional records does not help.

(cherry picked from commit cd2de2ee7ad55f295a00dfce5488ee3863d974d6)

Merge pull request #14481 from omoerbeek/backport-14471-to-rec-5.1.x

rec: Backport 14471 to rec-5.1.x: dump right SOA into dumpFile and report non-relative SOA for includeSOA=true

Merge pull request #14478 from omoerbeek/backport-14404-to-rec-5.1.x

rec: Backport 14404 to rec 5.1.x: Yahttp router: avoid unsigned underflow in match()

Merge pull request #14477 from omoerbeek/backport-14459-to-rec-5.1.x

rec: Backport 14459 to rec 5.1.x: move default Docker config to YAML

Merge pull request #14488 from omoerbeek/backport-14486-to-rec-5.1.x

rec: Backport 14486 to rec 5.1.x: pin pysnmp to version 5 for regression tests

Also pin pysnmp version for dnsdist regression tests

(cherry picked from commit 5d3db32982e7a06a9e653529baa2fb67e24d7189)

rec: pin pysnmp to version 5 for regression tests

(cherry picked from commit 4d44d3076051fe27ee91e847a3600ad19c44fd72)

rec: dump right SOA into dumpFile and report non-relative SOA for includeSOA=true

(cherry picked from commit 397da738caad01df0da04387083c73a0e941608b)

Fix example command line

(cherry picked from commit 7bfa760eb2a7df849c88252f471fc6626fbd4f97)

rec: move default Docker config to YAML

(cherry picked from commit 0f1374a7689a4ee6adcf9ea1185c6116142708df)

Avoid upos underflowing in match loop

(cherry picked from commit 09462bda7f8da4e59307e0d6a7446d499c1da34c)

no else block after break statement

(cherry picked from commit 9ecf2b37287270be3d06ac3d5570f5d67a0bb364)

Merge pull request #14442 from omoerbeek/rec-5.1.x-daily-el7

rec 5.1.x: daily build for el-7 instead of centos-7

rec 5.1.x: daily build for el-7 instead of centos-7

Merge pull request #14435 from omoerbeek/backport-14425-to-rec-5.1.x

rec: Backport 14425 to rec 5.1.x: fix typo in log message

Fix processsing typo.

(cherry picked from commit c91c84f640e32a7d24925a78cf3609e731d098e9)

Merge pull request #14402 from Habbie/backport-14400-to-rec-5.1.x

rec-5.1: switch el7 builds to Oracle Linux 7

switch el7 builds to Oracle Linux 7

(cherry picked from commit 73a1b98f92c671c590540ac19d74d70499f89066)

Merge pull request #14389 from omoerbeek/backport-14384-to-rec-5.1.x

rec: Backport 14384 to rec-5.1.x: keep Lua config as existing configs might use it

rec: keep Lua config as existing configs might use it

(cherry picked from commit 6b2d9507dab4d64623bbca6fcd3bbd57ddebff8e)

Merge pull request #14375 from omoerbeek/rec-specialize-5.1.x

rec: specialize rel/rec-5.1.x branch to rec only workflows

rec: specialize rel/rec-5.1.x branch to rec only workflows

Merge pull request #14374 from omoerbeek/rec-debian-tweaks

Rec followup to #14265: use correct file suffix for reloading and debian tweaks

Also use variable suffix for file when reloading YAML-Lua config

Merge pull request #14363 from omoerbeek/rec-rename-new-udr-settings

rec: make names of new udr settings consistent with existing scheme

Merge pull request #14373 from omoerbeek/rec-dns64-double-soa

rec: don't send double SOA record in the case of a dns64 CNAME that does not resolve

Add test for duplicate SOA record in the dns64/NODATA case

rec: tweak debian install, as suggested by @zeha

Merge pull request #14265 from omoerbeek/rec-yaml-as-conf

rec: allow recursor.conf file to contain YAML to ease transition to YAML config

Merge pull request #14366 from PowerDNS/dependabot/pip/pdns/keyroller/urllib3-1.26.19

build(deps): bump urllib3 from 1.26.18 to 1.26.19 in /pdns/keyroller

Merge pull request #14360 from rgacogne/auth-fix-distributor-unit-test-leak

auth: Better fix for the leak reported by LSAN in test-distributor_hh.cc

build(deps): bump urllib3 from 1.26.18 to 1.26.19 in /pdns/keyroller

Bumps [urllib3](https://github.com/urllib3/urllib3) from 1.26.18 to 1.26.19.
- [Release notes](https://github.com/urllib3/urllib3/releases)
- [Changelog](https://github.com/urllib3/urllib3/blob/main/CHANGES.rst)
- [Commits](https://github.com/urllib3/urllib3/compare/1.26.18...1.26.19)

---
updated-dependencies:
- dependency-name: urllib3
  dependency-type: indirect
...

Signed-off-by: dependabot[bot] <support@github.com>

Merge pull request #14345 from PowerDNS/dependabot/pip/pdns/recursordist/docs/urllib3-2.2.2

build(deps): bump urllib3 from 2.2.0 to 2.2.2 in /pdns/recursordist/docs

auth: Use [[maybe_unused]] in the distributor unit tests

As suggested by Otto.

Merge pull request #14318 from omoerbeek/rec-nsname-pbout

rec: add nsName into outgoing protobuf request/response messages

Install a small YAML default config instead of one with everything commented out

Document the new approach of reading YAML from a recursor.conf file

Generate no more .conf-dist file

Adapt RH packaging

Adapt Debian packaging

rec: allow recursor.conf file to contain YAML

This should us to work around the packaging issues discussed in #13935.
THe idea is that modify the parsing so that .conf files also *may* contain YAML.

The search for a config file then becomes:

1. Try read recuror.yml if it exists. If valid, done. If it is invalid punt.
2. Try read recursor.conf as YAML. If it is valid, done.
3. If it is invalid, try to read as old-style.

This means that the status of recursor.conf as a config file does not change.

This allows us to install a default YAML config into recursor.conf for new installs.
Of course we leave recursor.conf (and recursor.yml) alone for existing installs.

This is a draft. I will add docs and packaging changes after this is deemed
the way to proceed.

rec: make names of new udr settings consistent with existing scheme

Remove potential double SOA records if the target of a dns64 name is NODATA

Use const ref for string arg

Co-authored-by: Remi Gacogne <github@coredump.fr>

Merge pull request #14359 from omoerbeek/use-ucharview

dns.cc: use pdns::views::UnsignedCharView

Merge pull request #14358 from omoerbeek/rec-docs-mem

rec: describe (roughly) memory usage

Merge pull request #14350 from rgacogne/ddist-changelog-secpoll-1.9.5

dnsdist: Prepare ChangeLog and secpoll for 1.9.5

auth: Better fix for the leak reported by LSAN in test-distributor_hh.cc

This unit test is checking that we correctly throw when too many queries
are waiting in the distribution pipe, by making the mock backend slow
on purpose. Once the distributor has been restarted as expected, we need
to wait until the mock backend has processed all queued queries, otherwise
Leak Sanitizer will rightfully report a memory leak.

dnsdist: Fix formatting in the 1.9.5 ChangeLog

Co-authored-by: Peter van Dijk <peter.van.dijk@powerdns.com>

dnsdist: Fix formatting in the 1.9.5 ChangeLog

Co-authored-by: Peter van Dijk <peter.van.dijk@powerdns.com>

dns.cc: use pdns::views::UnsignedCharView

Includes minor cleanup and additions to make UnsignedCharView usable for this use case.
Supersedes #14356
Fixes
/usr/include/c++/v1/__fwd/string_view.h:22:41: warning: 'char_traits<unsigned char>' is deprecated: char_traits<T> for T not equal to char, wchar_t, char8_t, char16_t or char32_t is non-standard and is provided for a temporary period. It will be removed in LLVM 19, so please migrate off of it. [-Wdeprecated-declarations]

rec: describe (roughly) memory usage

Also fix a few refs

Merge pull request #14311 from romeroalx/remove-auth-46-daily-builds

GH Actions: remove rel/auth-4.6.x from daily/weekly builds

Merge pull request #14346 from omoerbeek/rec-pb-tags-tcp

rec: fix TCP case for policy tags set by gettag(_ffi)

Refactor test to avoid code duplciation, as suggested by @rgacogne

dnsdist: Prepare ChangeLog and secpoll for 1.9.5

rec: fix TCP case for cached policy tags

Merge pull request #14326 from rgacogne/ddist-grepq-ms-parsing

dnsdist: Use `pdns::checked_stoi` instead of `sscanf` for `grepq`'s ms

build(deps): bump urllib3 from 2.2.0 to 2.2.2 in /pdns/recursordist/docs

Bumps [urllib3](https://github.com/urllib3/urllib3) from 2.2.0 to 2.2.2.
- [Release notes](https://github.com/urllib3/urllib3/releases)
- [Changelog](https://github.com/urllib3/urllib3/blob/main/CHANGES.rst)
- [Commits](https://github.com/urllib3/urllib3/compare/2.2.0...2.2.2)

---
updated-dependencies:
- dependency-name: urllib3
  dependency-type: indirect
...

Signed-off-by: dependabot[bot] <support@github.com>

Merge pull request #14344 from PowerDNS/dependabot/pip/docs/urllib3-2.2.2

Bump urllib3 from 2.0.7 to 2.2.2 in /docs

Merge pull request #14341 from rgacogne/ddist-race-web-handlers

dnsdist: Fix a race condition with custom Lua web handlers

Bump urllib3 from 2.0.7 to 2.2.2 in /docs

Bumps [urllib3](https://github.com/urllib3/urllib3) from 2.0.7 to 2.2.2.
- [Release notes](https://github.com/urllib3/urllib3/releases)
- [Changelog](https://github.com/urllib3/urllib3/blob/main/CHANGES.rst)
- [Commits](https://github.com/urllib3/urllib3/compare/2.0.7...2.2.2)

---
updated-dependencies:
- dependency-name: urllib3
  dependency-type: indirect
...

Signed-off-by: dependabot[bot] <support@github.com>

dnsdist: Fix a clang-tidy warning in the custom web handlers code

Merge pull request #14330 from rgacogne/move-snmp-headers

snmp-agent: Move net-snmp headers out of our headers

dnsdist: Fix replacement of existing custom web handlers

Merge pull request #14340 from omoerbeek/rec-pp-remotes

rec: fix client remotes count when using proxy protocol

Add regression test for remote count when using proxy protocol

dnsdist: Fix a race condition with custom Lua web handlers

Custom web handlers written in Lua modify the global Lua context,
but until now they did not take the lock protecting it so a data
race condition was possible.
Reported by TSAN while running our unit tests.

Merge pull request #14328 from chbruyand/dnsdist-runtests

dnsdist: update test runner for mac

Merge pull request #14275 from esensar/feature/udr-ignore-list

rec: add options for ignoring domains for UDR purposes

rec: count substituted remote in case of proxy protocol

Other remote counts are already doing that

snmp-agent: Move net-snmp headers out of our headers

The net-snmp headers are unfortunately defining things that we do not
want, like `INET6` and `HAVE_LIBSSL`, so it's better for us not to
include them from our headers.

dnsdist: update test runner for mac with dynamic prefix and up to date package name for curl

dnsdist: Use `pdns::checked_stoi` instead of `sscanf` for `grepq`'s ms

Merge pull request #14324 from Habbie/auth-lua-docs-backquote-nit

auth docs: remove stray backquote

Merge pull request #14302 from rgacogne/ddist-ffi-svc

dnsdist: Add Lua FFI bindings to generate SVC responses

dnsdist: Apply suggestion from Charles-Henri's review (thanks!)

auth docs: remove stray backquote

Merge pull request #14280 from rgacogne/ddist-doc-ebpf-capability

dnsdist: Document that eBPF socket filtering requires `CAP_SYS_ADMIN`

Merge pull request #14183 from fredmorcos/auth-regression-tests-meson

Support meson in regression tests harness

Rename PDNS_MESON_PATH to PDNS_BUILD_PATH

This also ensures that PDNS_BUILD_PATH is set to `.` when the user does not pass it. This
stays consistent with the behavior we previously had.

Meson: Integrate auth geoip backend regression test

Auth: Adapt backend regression tests harness to Meson builds

Fix remaining formatting issues in settings/table.py

Fix formatting for settings/table.py

Merge branch 'master' into feature/udr-ignore-list

rec: add nsName into outgoing protobuf request/response messages

As there is no good existing field, I opted to add it as a meta
field.  We might want to make this optional, potentially clients
could not expect this.  TBD.

Merge pull request #14312 from omoerbeek/rec-pbout-udr

rec: do not add UDR field to outgoingProtobuf answer messages

Merge pull request #14307 from aerique/feature/update-repo-test-script

Update repo test script.

Merge pull request #14309 from omoerbeek/rec-cname-bound-settable

rec: make max CNAME chain length handled settable, previously fixed at 10

rec: do not add UDR field to outgoingProtobuf answer messages

rec: make max CNAME chain length handled settable, previously fixed at 10

Update repo test script version.

Remove support for EOL versions from repo test script.

Add `rec-51` support to repo test script.

Update version regex for Python 3.

(I think Python 3 and not Python 3.something specific.)

Remove Ubuntu Bionic and add Noble to repo test script.

Add auth-49, rec-50 and dnsdist-19 to repo test script.

gh actions: remove rel/auth-4.6.x from daily builds

Merge pull request #14308 from romeroalx/upgrade-list-packages

docs: upgrade packaging to 24.1

docs: update pip dependency packaging to 24.1