auth: Use a unique pointer for bind backend's `d_of`

Auth: Publish inactive KSK/CSK as CDNSKEY/CDS

Closes #5721

rec: NS-consistency check is only when we expect an insecure delegation

Merge pull request #5702 from cmouse/update-fixes

bindbackend: Fix transaction to return false on failure

rec: Correctly handle a CNAME answer when looking for a DS

rec: Handle direct NSEC queries

Merge pull request #5710 from Habbie/secpoll-unquote

remove "" around secpoll result. Fixes #5692

rec: Skip looking for cuts once we are Insecure or Bogus, just (N)TA

rec: Detect zone cuts by asking for DS instead of NS

Merge pull request #5711 from ahupowerdns/dnsdist-proba

add ProbaRule to dnsdist: match with given probability

add ProbaRule to dnsdist: match with given probability

This adds a ProbaRule, ProbaRule(1.0) means 'match always', 0.1 '10%'. Useful for TeeAction.

Fix doc and message nits

rec: Separate the actual code checking if a cut exists for refactoring

remove "" around secpoll result. Fixes #5692

Merge pull request #5700 from Habbie/seperate

doc nit: s/seperate/separate/

Merge pull request #5706 from Habbie/man-virtualenv-fail

actually abort when virtualenv is missing. Fixes #5701

actually abort when virtualenv is missing. Fixes #5701

auth API: use default options for cryptokeys

auth: Warn on startup if default key size is req'd

auth: make default-{k,z}sk-algorithms singular

bindbackend: Add missing safeGetBBDomainInfo return value checks

bindbackend: Move throw to correct place in startTransaction

The cleanup code wasn't being executed due to premature throw

bindbackend: Return false if domain_id is negative

It should return false, because it has effectively failed.
Returning true can cause several problems later on as
various functions assume they have valid file handle pointer
and valid domain ID to look up, which they don't.

add dynamic cache size metrics & documentation

bindbackend: Return false if startTransaction fails

doc nit: s/seperate/separate/

so I had to fill out "did you compile and test this code" and I nearly lied. So I tried it and it sucked. Better now.

implement dynamic cache sizeing for recursor

With this commit, the number of (packet)cache entries can be changed at runtime, although the effect may not be immediate in case of shrinking the cache.

Merge pull request #5696 from wojas/auth-api-patch-serial

auth api: return new serial in header after PATCH

pkgs: print test suite log on failure

auth api: also return old serial from PATCH

This adds the old serial as X-PDNS-Old-Serial and renames the header of
the new one to match.

The old serial is useful to verify that no other PATCH happened in the
meantime.

auth api: return new serial in header after PATCH

For zone PATCH requests, this adds a new `X-PDNS-Zone-Serial` response
header with the new zone serial.

Ideally this would be returned in a response JSON object, but this API
currently return 204 No Content and I did not want to break any clients
that might rely on this.

Merge pull request #5691 from pieterlexis/boost.m4-gcc-7.2

boost.m4: detect gcc 7.2

Merge pull request #5597 from pieterlexis/dnsdist-signed-unsigned-arm

dnsdist: Fix several signed/unsigned comparison warnings on ARM

Merge pull request #5659 from Habbie/gettag-docs

gettag doc nits

boost.m4: detect gcc 7.2

Merge pull request #5689 from Habbie/check-parts

verify parts.size(). Fixes #5688

explicitly warn when no hostname can be gathered

verify parts.size(). Fixes #5688

Merge pull request #5584 from eehakkin/ldapbackend/new-record-types

ldapbackend: Add support for new record types

Merge pull request #5678 from rgacogne/auth-requestor-payload

auth: Treat requestor's payload size lower than 512 as equal to 512

Merge pull request #5684 from Habbie/5673

be more specific about trailing dot handling, fixes #5673

Merge pull request #5666 from pieterlexis/doc-nits

Fix some doc nits

dnsdist: Add missing QPSAction

In 1.2.0 we deprecated the `addQPSLimit()` function, suggesting the
use of `QPSAction()` as a replacement, but the Lua binding for
`QPSAction()` was missing. In addition the documenration was referring
to `QPSLimitAction()` instead of `QPSAction()`.

Merge pull request #5665 from pieterlexis/auth-enable-pkcs11

Enable PKCS#11 in authoritative packages

Merge pull request #5670 from rgacogne/rec-5648-root-denial

rec: Fix erroneous check for section 4.1 of rfc6840

Fix Zone object rendering

rec: Add unit tests for rfc6840 section 4.1

rec: Fix erroneous check for section 4.1 of rfc6840

rec: Go Bogus if the name exists but retrieving the DS results in NXD

Add missing recursor 4.0.6 changelog

Merge pull request #5671 from rgacogne/rec-nsec-wrap-around

rec: Handle NSEC wrap-around

Fix link

Add upgrades notes on new LDAP record types

for #5584

ALso, fix layout

Mention the need for krb5.h

Closes #5674

Add removed recursion opts to upgrade guide

Fix some refs

Fix render error (no more bold text)

Link to the stats from StatisticsItem

Fix a nit in the dnsdist docs

Fix some doc nits

Merge pull request #5672 from rgacogne/rec-nxtrust-denial-nsec

rec: Add NSEC records on nx-trust cache hits

make sure we actually have parts

fix double dot on PTR & co

be more specific about trailing dot handling, fixes #5673

auth: Treat requestor's payload size lower than 512 as equal to 512

Merge pull request #5679 from rgacogne/auth-empty-java-options

auth: Unset _JAVA_OPTIONS before using jdnssec

auth: Unset _JAVA_OPTIONS before using jdnssec

Travis now [1] defaults to _JAVA_OPTIONS="-Xmx2048m -Xms512m". We wouldn't
care much, except that every Java command now outputs the following line
to stderr, breaking our jdnssec diffs:

"Picked up _JAVA_OPTIONS: -Xmx2048m -Xms512m"

[1]: https://docs.travis-ci.com/user/build-environment-updates/2017-09-06/

rec: Add unit tests for NSEC authenticated denial of existence

rec: An exact NSEC{,3} match can't deny the domain

Restructure fix and conform to convention

Handle AFSDB record separately due to record structure.

Closes #4703.

AFSDB records has two elements, <subtype> <hostname>,
as per RFC1183, and needs special treatment when parsing.

dnsdist: Add console completion and docs for the new additions:

* CPU pinning
* Cache sharding / deferred locking
* `recvmmsg()` use

dnsdist: Use `accept4()` to set the socket non-blocking, when available

dnsdist: Don't generate a fresh UUID until we really need it

We don't need to copy the header in `ageDNSPacket()`

dnsdist: Only call `toDNSString()` once when retrieving from the cache

Lock: Don't access and even less write to errno unless we have to

POSIX.1c made `errno` a thread-local, meaning its performance is
far worse than the one of a local variable.

dnsdist: Add support for handling UDP queries via recvmmsg() and sendmmsg()

dnsdist: Add support for pinning backend threads to specific CPUs

dnsdist: Add support for pinning listener threads to specific CPUs

dnsdist: Add support for sharding the packet cache

Also make the cache insert lock optionally deferrable.

rec: Add NSEC records on nx-trust cache hits

rec: Handle NSEC wrap-around

Document the SoftHSM/Botan interaction

Document enabling of PKCS#11 in changelog

Report PKCS#11 support in configure and --version

Enable PKCS#11 in auth builds

Merge pull request #5662 from RvdE/patch-6

[PATCH]: Recursor 4.1.0 alpha 1 fails to build on FreeBSD

Hopefully fix compilation error on linux

[PATCH]: Recursor 4.1.0 alpha 1 fails to build on FreeBSD

This fixes compilation on FreeBSD, which requires an extra include file and defines a slightly different type.

auth: Fix two mistakes in 4.1 changelog.

Merge pull request #5646 from neilcook/deviceid

Support for identifying devices by id such as mac address

Merge pull request #5658 from aerique/feature/update-auth-changelog

auth: Update the ChangeLog for 4.1.0.

Update secpoll for auth 4.1.0-rc1.

auth: Update the ChangeLog for 4.1.0.

Add missing requestorId and deviceId to summary print statement

gettag doc nits

Merge pull request #5636 from mind04/luabackend-test

Fix and hook up luabackend tests

Merge pull request #5647 from ahupowerdns/dnsdist-dyntrunk-tcp

Make dnsdist dynamic truncate do right thing on TCP/IP