Document TSIG commands in pdnsutil

Describe more migration methods

dnsdist: Add `DNSAction.Refused` to the documentation

Reported by @rygl (thanks!).

Merge pull request #4781 from zeha/api-comment-zero-ttl

API: correctly take TTL from first record even if we are at the last comment

Merge pull request #4777 from pieterlexis/issue-4771

Only delegate if NS's are below apex in auth-zones

Merge pull request #4774 from pieterlexis/document-systemd-unit-edit

Document disable-syslog intereaction with systemd

dnsdist: Save history to home-dir

Closes #4562

fix SOA record in HOWTO

Merge pull request #4623 from rgacogne/rec-tcp-rfc7766-section10

rec: Add TCP management options described in section 10 of rfc7766

auth: Add TCP management options described in section 10 of rfc7766
* max-tcp-connection-duration
* max-tcp-connections-per-client
* max-tcp-transactions-per-conn
* tcp-idle-timeout

Merge pull request #4758 from rgacogne/rec-dq-on-stack

rec: Allocate the DNSQuestion `dq` object on the stack

Merge pull request #4784 from rgacogne/dnsdist-doc-first-available

dnsdist: Fix the `firstAvailable` policy description

Merge pull request #4783 from rgacogne/atomic-powerpc

Add -latomic on powerpc

RPZ: log additions/removals at degug, not info

Unconfuse the RPZ summary

Closes #4342

LuaWrapper: Fix comments since `ValueInRegistry` now takes an optional index

Don't call `hostname -f` on openbsd

Closes #2579

Auth: Cleanup `DNSName::getRawLabels()` usage

No real issue I'm aware of, but it's cleaner that way.

Revamp the manpage building

* Always dist the relevant manpages
* Don't build tools manpages is configured with `--disable-tools`
  (Closes #4643)
* Don't remove manpages if they cannot be rebuilt (Closes #3306)

rec: Don't choke on escaped content in getZoneCuts()

`getZoneCuts()` was constructing a `DNSName` by passing a raw label returned
from `DNSName::getRawLabels()` as a string. The constructor then tried to handle
escaped characters from the string, resulting in a different `DNSName` than the
expected one. This caused the `qname != begin` condition to be false even after
every label in `labelsToAdd` had been added, causing an UB by calling
`std::vector::back()` on an empty vector.
Using `DNSName::prependRawLabel()` instead prevents this issue since the string is
not escaped.

Merge pull request #3869 from rgacogne/rec-outgoing-protobuf

rec: Log outgoing queries / incoming responses via protobuf

dnsdist: Use `IP_BIND_ADDRESS_NO_PORT` when available

Since Linux 4.2, we can use `IP_BIND_ADDRESS_NO_PORT` to let the kernel
know that we are calling `bind()` only to select the source address
without any intention to listen on the socket. That way the source
port "will be automatically chosen at `connect()` time, in a way
that allows sharing a source port as long as the 4-tuples are unique."

Suggested by Willy Tarreau (thanks!).

dnsdist: Send a latency of 0 over carbon, null over API for down servers

dnsdist: Fix the `firstAvailable` policy description

It doesn't use the server's `order`, except when falling back to
`leastOutstanding`.

Add -latomic on powerpc

API: correctly take TTL from first record even if we are at the last comment

Fixes #4766.

API: Add test demonstrating issue #4766

Merge pull request #4539 from pieterlexis/remove-unused-var

Remove 'kind' param in DNSBackend::getDomainKeys

rec: only delegate if NS's are below apex in auth-zones

As:
 1. we **are** authoritative for the zone named at the apex
 2. We would servfail because we could get an upward referral

Closes #4771

LuaWrapper: Use the correct index when storing a function

The LuaWrapper used to assume that the function was at the
top of the stack, making it effectively impossible to have
a callback function parameter anywhere else than as the last
parameter.

Document disable-syslog intereaction with systemd

See #4713 for context

Merge pull request #4744 from rgacogne/handle-closesocket-excp

Handle exceptions raised by `closesocket()`

rec: Wait until after daemonizing to start the outgoing protobuf thread

rec: Log outgoing queries / incoming responses via protobuf

Merge pull request #4584 from tuxis-ie/pdnsutil-account

Allow setting the account of a zone via pdnsutil

Merge pull request #4627 from tuxis-ie/clearify-soa-edit-api-doc

Add link to options of SOA-EDIT-API

Merge pull request #4767 from Habbie/rpz-hidettl

hide ttl in RPZ tests to avoid random failures

Merge pull request #4772 from pieterlexis/dnsdist-contrib-init

Fix dnsdist initscript config check

Fix dnsdist initscript config check

Merge pull request #4769 from rgacogne/rec-init-rcode-before-preresolve

rec: Set the result to NoError before calling `preresolve`

rec: Clean up a weird construct left over from the shared_ptr -> stack move

dnsdist: Add TCP management options from rfc7766 section 10

Merge pull request #4759 from rgacogne/dnsdist-110-beta2-changelog

dnsdist: Update ChangeLog for 1.1.0-beta2

dnsdist: Add #4748 to the ChangeLog

Merge pull request #4748 from rgacogne/dnsdist-cache-cleaning-percentage

dnsdist: Add `setCacheCleaningPercentage()`

dnsdist: Add #4764 and #4765 to the beta2 ChangeLog

Merge pull request #4764 from rgacogne/dnsdist-tcp-workers-vect-race

dnsdist: Prevent race while creating new TCP worker threads

Merge pull request #4765 from pieterlexis/dnsdist-improvements

DNSDist: some service improvements

rec: Set the result to NoError before calling `preresolve`

Otherwise `rq.rcode` needs to be set explicitly when handling the
query from `preresolve`, which is not documented and wasn't the case
before.

hide ttl in RPZ tests to avoid random failures

Merge pull request #4751 from zeha/api-decline-mixed-ns

API: prevent sending nameservers list and zone-level NS in rrsets

Merge pull request #4763 from desec-io/master

Extended pdns_control man page: pdns_control notify *

dnsdist: check config before starting

dnsdist: Ignore file created by autoreconf

Extended pdns_control man page

dnsdist: Check the vector capacity before creating the TCP worker thread

dnsdist: document --check-config in --help

Merge pull request #4760 from rgacogne/remote-logger-set-invalid-on-close

Set `RemoteLogger::d_socket` to -1 after closing it

dnsdist: Add #4541 to the ChangeLog

Merge pull request #4541 from rgacogne/fix-suffix-match-tree

dnsdist: Fix insertion issues in SuffixMatchTree, move it to dnsname.hh

SuffixMatchNode: Fix insertion issue for an existing node

If the node we are about to insert already existed as an intermediary
one, we need to mark it as an end node.

dnsdist: Prevent race while creating new TCP worker threads

We try very hard to avoid using locks, but we need to prevent two
threads inserting into the TCP workers vector concurrently. While
this can't happen at runtime since the healthcheck thread is the
only one calling `g_tcpclientthreads->addTCPClientThread()`, this
might happen at startup time because we start the TCP acceptor
threads one after another and they all call it once.
This might result, for example, in one vector entry being overwritten
and another one remaining value-initialized to zero.

Set `RemoteLogger::d_socket` to -1 after closing it

Otherwise, in the unlikely case `SSocket()` throws an exception
we might end up with a stale file descriptor in `RemoteLogger::reconnect()`.

dnsdist: Update ChangeLog for 1.1.0-beta2

rec: Allocate the DNSQuestion `dq` object on the stack

We don't need to allocate a `shared_ptr` for each query.

Merge pull request #4753 from rgacogne/dnsdist-tcp-fixes

dnsdist: Fix FD leak on TCP connection failure, handle TCP worker creation failure

dnsdist: Don't leak a FD if the TCP connection to the backend fails

dnsdist: Better handling of failures during TCP worker thread creation

Remove 'kind' param in DNSBackend::getDomainKeys

It was unused anyway. Closes #4493

Merge pull request #4566 from pieterlexis/dnsheader-in-dnsquestion

DNS Header and EDNS Flag access for Lua

Fix indenting in recursor scripting docs

Expose EDNS Flags to Lua

Closes #4531

Lua: Give access to the dnsheader

Merge pull request #4638 from rgacogne/auth-bindbackend-zoneid-lookup

auth: In `Bind2Backend::lookup()`, use the `zoneId` when we have it

Merge pull request #4684 from hlindqvist/clarify-activate-tsig

Clarify pdnsutil activate-tsig-key description

Merge pull request #4686 from rgacogne/calidns-not-enough-queries-crash

calidns: Don't crash if we don't have enough 'unknown' queries remaining

Merge pull request #4715 from rgacogne/dnsmessage-proto-set-version-2

Specify that dnsmessage.proto uses protobuf version 2

Merge pull request #4724 from rgacogne/rec-lua-thread-id

rec: Add `getRecursorThreadId()` to Lua, identifying the current thread

dnsdist: Add an option to 'mute' UDP responses per bind

API: prevent sending nameservers list and zone-level NS in rrsets

DNSResourceRecords that are read back should generally be in noDot format

Fixup pdnsutil

Remove "place" from Lua axfrfilter

The slave code did not pay attention to d_place in the received
DNSResourceRecords anyway, so throwing away that info is alright.

Remove d_place from DNSResourceRecord

Now that DNSResourceRecords are only supposed to be created by backends, they certainly have no say in the DNSPacket positioning.

Drop UeberBackend::get(DNSResourceRecord&)

Add documentation in the manpage

Remove useless 'meta'

Allow setting the account of a zone via pdnsutil

Merge pull request #4564 from rgacogne/rec-public-dnsquestion

rec: Pass a `DNSQuestion` object to Lua hooks

Merge pull request #4749 from Habbie/test-counters-latency

remove unreliable `latency` variable from counters test

Merge pull request #4746 from rgacogne/auth-pdnsutil-coverity-1366826

auth: Fix coverity warning in `pdnsutil show-zone`

Merge pull request #4535 from rgacogne/dnsdist-lua-do

dnsdist: Add `DNSQuestion:getDO()`

Merge pull request #4702 from rgacogne/dnsdist-udp-timeout

dnsdist: Add `setUDPTimeout(n)`

Merge pull request #4726 from rgacogne/dnsdist-servfail-no-server

dnsdist: Add an option to return ServFail when no server is available

Merge pull request #4743 from rgacogne/dnsdist-client-bpf

dnsdist: Ignore newBPFFilter() and newDynBPFFilter() in client mode

remove unreliable `latency` variable from counters test

Merge pull request #4745 from Habbie/showrule-plural

add missing letter, plus format

add missing letter, plus format

dnsdist: Allow TTL alteration via Lua

Merge pull request #4742 from rgacogne/dnsdist-tcp-queued-counter

dnsdist: Decrement the queued TCP conn count if writing to the pipe fails