dnsdist: Speed up the round robin policy

Working with indices instead of copying shared pointers results in
a nice speed up, cutting the CPU time in half.

Merge pull request #9408 from RvdE/patch-5

Fix building with LLVM11

Merge pull request #9396 from omoerbeek/rec-rpz-ip-multi

Rec: allow multipe local data records when doing RPZ IP matching

Sorting of items

s/mutex/lock in descriptions

Co-authored-by: Remi Gacogne <rgacogne+github@valombre.net>

Fix building with LLVM11

There's a typo on line 529, where it says "true", but the double quotes cause a type cast error on LLVM11.

dnsdist-console.cc:529:32: error: type 'const char [5]' cannot be narrowed to 'bool' in initializer list [-Wc++11-narrowing]
  { "SetNegativeAndSOAAction", "true", "nxd, zone, ttl, mname, rname, serial, refresh, retry, expire, minimum [, options]", "Turn a query into a NXDomain or NoData answer and sets a SOA record in the additional section" },
                               ^~~~~~
dnsdist-console.cc:529:32: note: insert an explicit cast to silence this issue
  { "SetNegativeAndSOAAction", "true", "nxd, zone, ttl, mname, rname, serial, refresh, retry, expire, minimum [, options]", "Turn a query into a NXDomain or NoData answer and sets a SOA record in the additional section" },
                               ^~~~~~
                               static_cast<bool>( )
1 error generated.

Merge pull request #9407 from mind04/pdns-race

auth: fix cache cleaning race conditions in DNSSECKeeper()

auth: fix cache cleaning race conditions in DNSSECKeeper()

pdnsutil: file-local functions need to be static

statbag: prevent re-declaration in production coded

doc: Fix broken link to "per-zone-settings-domain-metadata"

Merge pull request #9157 from rgacogne/reuseport-lb

Add support for FreeBSD's SO_REUSEPORT_LB

Merge pull request #9404 from jsoref/test-recursor-remove-cd

test-recursor: remove duplicate cd directive

Replaced bzero with memset
Adjusted types
(via Remi on Aug 19)

rst: Remove failed attempt to fix rst warning

rst: Definition list ends without a blank line

rst: fix markup

rst: fix underline length

rst: use anonymous reference

to avoid duplicate explicit target

statbag: when redeclaring a key, reset to 0 instead of reallocating

Merge pull request #9088 from neheb/nbm

replace boost:bind() with lambdas

Merge pull request #9399 from jsoref/rst-blankline

rst: Definition list ends without a blank line; unexpected unindent

Formatting

Merge pull request #9101 from pieterlexis/lua-record-improvements

LUA records: two improvements to createForward

Merge pull request #8824 from cmouse/retrieve

Allow forced retrieval

Merge pull request #9395 from Habbie/spelling-9264

fix spelling dict after merge of 9264

fix spelling dict after merge of 9264

Add unit test for matching on netmask.

Also: fix the test to remove an entire entry. That should only be done
if there are no custom records left after the cleanup.
Old code was too eager and removed the entry whenever there was only one
custom record left. We could be trying to  remove a non-matching one.

Merge pull request #9264 from cmouse/patch-1592679516

PKCS#11: Document SoftHSM2 remote usage

Merge pull request #9384 from kpfleming/add-rrsets-parameter-to-listZone

Document 'rrsets' parameter to API listZone operation

Merge pull request #9394 from vincentbernat/patch-1

Fix capitalization of Zone in documentation

Merge pull request #9390 from omoerbeek/rec-record-cache-shards

rec: rename cache-shards to record-cache-shards and document it.

dynhandler: Do not copy master value

pdns_control.1.rst: retrieve - Document new parameter

dynhandler: Allow specifying master IP on retrieve

Setting master IP allows overriding master location. This will
also override slave requirement checks, allowing fetch of NATIVE
and MASTER zones.

communicator: Allow forcing domain retrieval

This allows forcing retrieval of domain that is not slave domain.

Fix capitalization of Zone in documentation

Fix doc

Fix rebase conflict

Fix record name in doc

Fix rebase

Fix record name in doc

Target 4.4.0 for APL records

Fix record name in doc

Merge

Fix ordering

Fix record name in doc

Fix rebase conflict

Fix record name in doc

Fix rebase

Fix ordering

Fix record name in doc

Add support for zero and multiple items in the APL RDATA

* Added a struct (APLRDataElement) for a single item
* Replace fields with a vector of APLRDataElement in APLRecordContent
* Adjusted APL methods to loop over backend record or packet accordingly
* Added tests with 0 items, 2 ipv4 items and a mix of ipv4 and ipv6

Fix ordering

Fix record name in doc

Fixed netmasks and added tests

Use boolean for negation flag (class definition)

Target 4.4.0 for APL records

Add APL field name to spell check

Fixed travis warning

Style fixes

Use boolean for negation flag

Simplify loop to parse address in incoming packet

Lexicalcast not needed after move to ComboAddress/Netmask

Updated to use Netmask class and boilerplate

Fix ordering

Fix record name in doc

Support for APL Records

This patch adds support for APL records (rfc3123)
- Tested with the BIND and SQLite3 backends
- Tested IPv4 and IPv6
- Tested Dynamic updates
- Tested negation flag
- Closes #8379

The patch includes a documentation update (need to set release version
once accepted) and unit tests.

Contributors:
nicko@threatstop.com - Nicolas Dehaine
dshabanov@threatstop.com - Dmitry Shabanov

I (nicko@threatstop.com) agree that this code can become GPLv2 licensed.

Merge pull request #9393 from Habbie/dnsdist-upgrade-webserver-acl

dnsdist upgrade notes: note new webserver ACL

dnsdist upgrade notes: note new webserver ACL

Merge pull request #9388 from omoerbeek/rec-dnsname-equal

Fix docs for DNSName::equal()

Fix docs for DNSName::equal()

Since overloading Lua wrapper functions does not seem to be possible,
fix docs for DNSName:equal(). But note that == is defined for DNSNames.

Fixes #7510

Rename cache-shards to record-cache-shards and document it.

Export record cache mutex stats via the various channels.

Also process removal in a more generic way.

Allow IP (netmask) based RPZ trigger to have multiple records.

While there, refactor the name based code as well, so name based NS triggers
can have multiple records.

Merge pull request #8928 from rgacogne/auth-lua-axfrfilter-last-char

auth: Ensure qtype is set before calling setContent() in axfrfilter()

Merge pull request #7932 from James-TR/patch-2

auth: remove redundant --no-config in makefile

auth: remove redundant --no-config from commands

Both the flags --no-config and --config=default prevent the loading of
configuration files from disk when used independently as per
https://github.com/PowerDNS/pdns/blob/master/pdns/receiver.cc#L418-L419

This commit removes the anomaly from documentation and build files to avoid
confusion and make it consistent among all packages.

Document 'rrsets' parameter to API listZone operation

The listZone operation supports the 'rrsets' parameter in the same
fashion as createZone does.

Signed-off-by: Kevin P. Fleming <kevin@km6g.us>

Merge pull request #7963 from Godwottery/master

Add a new command to add a super-master to SQL backends

Merge pull request #8564 from criteo-forks/weighted_gap

geoipbackend: propagate weighted rounding gap fix

Merge pull request #8565 from criteo-forks/stop_weighted

geoipbackend: stop looking after first weighted match

Merge pull request #8623 from jonathaneen/accept_combination_delete_replace_for_rrset

Make a combination of delete and replace for rrset possible

auth: Remove GSS/TSIG support

Merge pull request #9092 from jsoref/current-config-help

receiver: fix help output for pdns current-config

Merge pull request #9340 from pieterlexis/auth-api-rm-nsec3param

Auth API: Allow removal of NSEC3PARAM metadata

Merge pull request #9380 from rgacogne/qclass-in-cleanup

Replace the use of '1' by QClass::IN to improve readability

Merge pull request #9378 from rgacogne/ddist-stop-backend-thread-on-removal

dnsdist: Stop the related responder thread when a backend is removed

rec: Fix invalid unknown record in the unit tests

dnsdist: Handle EINTR in DelayPipe

Otherwise the DelayPipe thread might stop because the read() operation
has been interrupted by a signal (like SIGWINCH, which is quite annoying).
Also remove the unused `read()` operation.

Merge pull request #9218 from zeha/auth-log-actions

auth: log more pdns_control actions

auth: remove duplicated Makefile target for bind dnssec schema

Replace the use of '1' by QClass::IN to improve readability

Raise an exception on invalid first part (!= \#) in unknown records

Merge pull request #9318 from zeha/gsql-specific

gsqlbackend: allow backend-specific queries

Merge pull request #9265 from zeha/notify-axfr

auth: add used master address to slave check logs

Merge pull request #9049 from rgacogne/ddist-edns-buffer-size-self-generated

dnsdist: Set the default EDNS buffer size on generated answers to 1232

Merge pull request #9159 from rgacogne/ueberbackend-tests

auth: Add some UeberBackend unit tests, document multi-backend interactions

Raise an exception on invalid hex content in unknown records

Otherwise we can end up reading uninitialised memory from the stack,
possibly leaking information.
This is only an issue if the content is read from an untrusted source
and can be passed back to an attacker.