Merge remote-tracking branch 'origin/master' into ixfrdist-limit-size

Merge pull request #6848 from zeha/luaconfig-pdnslog

recursor: Add pdnslog to Lua configuration scripts

Merge pull request #6901 from pavel-odintsov/master

Added Prometheus stats support for dnsdist

Merge pull request #6881 from phonedph1/top-timeouts

Keep track of what destinations are causing the most timeouts

Added up to date Prometheus endpoint output

Added address label and switched code to boost::format

Renamed dnsdist_pools_servers to singular form dnsdist_pool_servers

Replaced custom host address crafting code to toStringWithPort

Do not replace dot in metric names. Use singular form for metric base name

Removed dnsdist_querycount_queries metric group

Merge pull request #6864 from pieterlexis/rec-414-changelog

Recursor 4.1.4 changelog and secpoll

Removed main from all Prometheus metric names

Do not reset per query counters when setQueryCount(true)

Added weight and order values for all servers in Prometheus

Fixed alignment for code

Reworked Prometheus metric types to scoped enum

Replaced function arguments to constant references to avoid copying memory

Replaced getCopy by getLocal

Replaced warnlog by vinfolog to reduce log verbosity

Update settings for backported setting

Add recursor 4.1.4 changelog

Add recursor 4.1.4 to secpoll

Merge pull request #6902 from ploxiln/loglevel_explain

docs: auth config settings: explain loglevel value

Merge pull request #6903 from gibson042/2018-08-DNSQuestion.len-documentation

dnsdist: Fix documentation of DNSQuestion.len

Merge pull request #6904 from gibson042/2018-08-documentation-grammar

docs: Fix minor grammar issues

docs: Fix minor grammar issues

dnsdist: Fix documentation of DNSQuestion.len

docs: auth config settings: explain loglevel value

Introduced metric description storage and improved Prometheus support

Added Prometheus stats endpoint. Patch by Kai Storbeck <kai@xs4all.nl>

Merge pull request #6668 from zeha/api-zone-lookup

Auth API: add zone lookup by /zones?zone=example.org.

Merge pull request #6898 from ploxiln/changelog_414_fix

changelog: 4.1.4 back-ported #6648 not #6848

changelog: 4.1.4 back-ported #6648 not #6848

pull-request #6648 is mysql transaction-isolation syntax change
pull-request #6848 is lua logging stuff

Update auth 4.1.4 release date, we were fast

Merge pull request #6863 from pieterlexis/auth-414-changelog

Changelog + secpoll for auth 4.1.4

Add auth 4.1.4 to secpoll

Add authoritative server 4.1.4 changelog

Merge pull request #6873 from phonedph1/flush-forward

Purge all auth/forward zone data including subtree.

Merge pull request #6877 from rgacogne/dnsdist-fix-ecs-sign-comparison

dnsdist: Fix a sign-comparison warning in isEDNSOptionInOpt()

Merge pull request #6879 from Habbie/ixfrdist-workdir-nit

ixfrdist: fix doc nit

Merge pull request #6888 from ploxiln/docs_api_axfr_retrieve_fix

API docs: fix zone axfr-retrieve description

Merge pull request #6889 from ploxiln/changelog_413_fix

changelog: fix dup of #6312 in 4.1.3, was in 4.1.2

Merge pull request #6890 from rgacogne/ixfrdist-optims

ixfrdist: Reduce memory usage and lock contention

Merge pull request #6891 from scottbender/patch-1

Update quickstart.rst

Update quickstart.rst

Correct spelling mistake

Move t_timeout up to the timeout stats, outside of throttle updates.
Move t_timeout into syncres.cc - testrunner now builds.

ixfrdist: Don't process records of interrupted AXFR

ixfrdist: Break out of the domain updates loop if we are exiting

ixfrdist: Reduce the contention and copies of zone information

ixfrdist: Small optimizations for a large number of zones, add debug

AXFRRetriever: Don't parse records of answers with a non-zero code

Also reuse records from MOADNSParser whenever possible, instead of
allocating new ones.

ixfrdist: Correctly retrieve the SOAs from the diff if needed

They might be passed to makeIXFRDiff(), and the code to handle the
case where they aren't was broken.

ixfrdist: Small optimization in makeAXFRPackets()

ixfrdist: Reduce memory usage during zone retrieval

Merge pull request #6886 from rgacogne/ixfrdist-fix-xfr

ixfrdist: Fix invalid buffer usage in getSerialFromMaster()

changelog: fix dup of #6312 in 4.1.3, was in 4.1.2

API docs: fix zone axfr-retrieve description

Merge pull request #6887 from gibson042/test-any-address

dnsdist: Test retrieving address from any-address binds

dnsdist: Test retrieving address from any-address binds

ixfrdist: Fix invalid buffer usage in getSerialFromMaster()

Merge pull request #6885 from pieterlexis/ixfrdist-fixes

Several ixfrdist fixes

ixfrdist: Don't handle SIGSTOP

ixfrdist: make axfr-timeout default match documented default

ixfrdist: clarify exit message

ixfrdist: fix typo in error

ixfrdist: use port 53 by default for IPs from json

ixfrutils: add timeout to readSerialFromMaster

Make the error messages better in ixfrdist

Keep track of what destinations are causing the most timeouts

ixfrdist: fix doc nit

Merge pull request #6737 from chbruyand/dnsdist-consistent-hashing

dnsdist: add consistent hash builtin policy

Purge all auth/forward zone data including subtree.

Previously this would miss purging out removed entries/data.

ixfrdist: Add option to limit AXFR record count

dnsdist: Fix a sign-comparison warning in isEDNSOptionInOpt()

Merge pull request #6870 from rgacogne/dnsdist-docs-dot

dnsdist: Fix DoT docs to clarify we only listen on TCP, not UDP

dnsdist: Fix DoT docs to clarify we only listen on TCP, not UDP

Merge pull request #6810 from Habbie/dnsdist-doc-no-version

remove version information from dnsdist doc title

Merge pull request #6858 from Habbie/rfc2136-correct-zone

RFC2136 fixes

Merge pull request #6861 from Habbie/dont-leak-addzone.com

do not leak requests for addzone.com to the Internet

Merge pull request #6850 from rgacogne/rec-disable-tcp-sockets-reuseport

rec: Disable only our own TCP listening socket when reuseport is enabled

change 0 to nullptr

Merge pull request #6825 from klaus3000/disable-signed-NOTIFYs

add option send-signed-notify to send NOTIFYs without TSIG signature

Merge pull request #6845 from zeha/api-writeable

Drop api-readonly configuration setting

Merge pull request #6857 from klaus3000/remove-SOAcheckBackoff-on-incoming-NOTIFY2

Remove SOA-check backoff on incoming NOTIFY and fix d_lock handling

Merge pull request #6859 from Habbie/edit-zone-dnsname-abort

make edit-zone catch zoneparser exceptions as well

Merge pull request #6860 from Habbie/test-nits

auth regression test: language/content nits

Fix removal notice in docs

rfc2136: do lookups in the right zone

add test for parent/child confusion

Merge pull request #6856 from skoef/dynBpfExcludeRange

added :excludeRange and :includeRange methods to DynBPFFilter class

do not leak requests for addzone.com to the Internet

test nits

make edit-zone catch zoneparser exceptions as well

rec: Without reuseport, every listener thread watches all TCP sockets

So we simply add all TCP sockets to the list watched by these threads
instead of using a separate variable, to make it easier to read later
on.

add sub.test.dyndns zone, add occluded record to parent

use gsort when available, because sort -V is a GNU extension

after a db lookup, always finish the get cycle

dnsdist: consistent hash - also check for individual pool's policies before pre-computing backend's hashes

Delete a zone from the list of failed slave-checks on incoming NOTIFY and fix d_lock handling

- If the master is not available, PDNS uses an incrmental backoff for SOA-checks to avoid
constant SOA checks on the failed master server. If the master server comes back to life
and sends a NOTIFY, the NOTIFY is ignored due to the backoff. This patch removes the zone
from the list of failed slave-checks to allow immediate checking.

- Debug-Log if a slave-check was skipped due to incremental backoff feature

- Fix d_lock handling according to comments on https://github.com/PowerDNS/pdns/pull/6819

- Be more verbose about the consequences of a failed SOA check

unrelated syntax fixes in docs

move documentation about purgeExpired to DynBPFFilter

purgeExpired is a method of DynBPFFilter and not BPFFilter so it was
moved to the proper section in the document