dnsdist: Fix headers handling in the DoH regression tests

dnsdist: Add support for custom DoH headers

update docs for upcoming custom response header changes for dnsdist

Merge pull request #8146 from Habbie/pg32bit-changelog-4.0-4.1

auth: changelogs and secpoll for 4.0.9, 4.1.11

auth: changelogs and secpoll for 4.0.9, 4.1.11

Merge pull request #8143 from Habbie/advisory-2019-06

advisory 2019-06

advisory 2019-06

Merge pull request #8131 from dwfreed/dnsdist-flush-cout

dnsdist-console: flush cout after printing g_outputBuffer

Merge pull request #8135 from zeha/ipcrypt-license

ext/ipcrypt: Ship LICENSE in tarballs

ext/ipcrypt: Ship LICENSE in tarballs

Merge pull request #8132 from jpmens/patch-12

YAML backend

YAML backend

it appears this is called, or at least a.k.a., the YAML backend, so let's say that.
Also fixes some typos and formatting I noticed This page could use a lot of extra comprehension love, IMO.

dnsdist-console: flush cout after printing g_outputBuffer

cout may not be a tty, in which case it is block buffered by stdlib, so
flush it after printing g_outputBuffer.

Fixes #8130

Merge pull request #8097 from Habbie/notifiedserial-bigint

auth: use BIGINT for notified_serial in pg schema

make test-schema exit(1) on failure; catch setNotified exception

add notified_serial range test to pdnsutil test-schema

document gsql change_date removal and pgsql type change

use BIGINT for notified_serial in pg schema; fixes #6815

Merge pull request #8125 from Habbie/tcp-stat

auth: add metric for open TCP connections

auth: add metric for open TCP connections

Merge pull request #8120 from zeha/opencsw

README: remove OpenCSW advice

README: remove OpenCSW advice

Merge pull request #8113 from rgacogne/ddist-tcp-outstanding

dnsdist: Double-check we only increment the outstanding counter once

Merge pull request #8116 from rgacogne/dnsdist-fix-regression-tests-py2

dnsdist: Fix a UnicodeDecodeError with py2 in the regression tests

dnsdist: Fix a UnicodeDecodeError with py2 in the regression tests

Merge pull request #8112 from rgacogne/dnsdist-doh-dangling-send-error

dnsdist: Prevent a dangling DOHUnit pointer when send() failed

Merge pull request #8081 from pieterlexis/configure-fail-on-no-systemctl

m4/systemd.m4: Fail when systemctl is not available

Merge pull request #7951 from pieterlexis/update-boost-m4

Update boost.m4

dnsdist: Prevent a dangling DOHUnit pointer when send() failed

dnsdist: Double-check we only increment the outstanding counter once

Merge pull request #8107 from phonedph1/patch-9

Update rules-actions.rst

Merge pull request #8109 from zeha/spelling

Fix some spelling errors found by lintian

Merge pull request #8111 from Habbie/docutils-no-0.15

avoid docutils 0.15: https://sourceforge.net/p/docutils/bugs/365/

avoid docutils 0.15: https://sourceforge.net/p/docutils/bugs/365/

Fix some spelling errors found by lintian

Update pdns/dnsdistdist/docs/rules-actions.rst

Co-Authored-By: Matt Nordhoff <mnordhoff@mattnordhoff.com>

Update rules-actions.rst

s/cname/value/

Merge pull request #8105 from phonedph1/patch-8

Update dnsdist-web.cc

Update dnsdist-web.cc

Per isomer ;)

Merge pull request #7872 from Habbie/auth-lua-reuse-docs

LUA record documentation (version number, shared model)

Merge pull request #8093 from Habbie/nproxy-whatis

add whatis description to nproxy man page

clarify that states are per-thread

add whatis description to nproxy man page

Use the boost.m4 boost::context detection

Update boost.m4 to serial 30

Enable systemd in coverity builds

Merge pull request #8090 from Habbie/lgtm-fewer-features

Revert "enable a bunch of extra features during LGTM builds"

Revert "enable a bunch of extra features during LGTM builds"

This reverts commit 8763cf1ca8ba2c7266521272fedc2b130af71f75.

Merge pull request #7927 from rgacogne/dnsdist-doh-timeout

dnsdist: Proper HTTP response for timeouts over DoH

Merge pull request #8089 from omoerbeek/fix_rfc1982_less_than

Fix the rfc1982LessThan template, it only works properly if the cast …

Merge pull request #8088 from rgacogne/dnsdist-fix-unbound-wire-regression

dnsdist: Fix local variable 'wire' referenced before assignment

Add static assert to ensure T is unsigned.

Fix the rfc1982LessThan template, it only works properly if the cast is done to a same-sized type.

If we use it for uint8_t or uint64_t it breaks currenty.  Add unit tests while there.

dnsdist: Drop the response if the IDState has been reused under our feet

dnsdist: Fix the DoH (https) response information in verbose mode

Merge pull request #8087 from rgacogne/mplexer-test-debug

Don't fail the test right away if we don't have the right number of FDs ready

dnsdist: Fix local variable 'wire' referenced before assignment

Merge pull request #8071 from cmouse/tsig-key

packethandler: Compare TSIG key name using DNSName

dnsdist: Add comments about the use of IDStates and origFD

Don't fail the test right away if we don't have the right number of FDs ready

This way we can at least check that the callbacks are called later.
Also, since it looks like the read pipe is always reported as ready,
let's try to write first to see if it blocks.

Merge pull request #8034 from pieterlexis/rec-debian-sysv

Ensure Debian SysV users get set{g,u}id

m4/systemd.m4: Fail when systemctl is not available

We use systemctl to determine the version as to find out what features
to enable in the unit file.

Merge pull request #8080 from mnordhoff/patch-4

Clarify XPF support in Auth changelog

Merge pull request #8079 from rgacogne/ddist-tcp-fastopen-retries

dnsdist: Fix unlimited retries when TCP Fast Open is enabled

dnsdist: Fix timeout handling when reusing an IDS from DoH

Merge pull request #7933 from rgacogne/dnsdist-doh-http-stats

dnsdist: Add more stats about DoH HTTP responses

Merge pull request #8078 from rgacogne/ddist-tcp-answer-exception

dnsdist: Catch exceptions thrown when handling a TCP response

packethandler: Compare TSIG key name using DNSName

Fixes #8070

Merge pull request #8077 from Habbie/lgtm-more-features

enable a bunch of extra features during LGTM builds

Clarify XPF support in Auth changelog

Reported by @spheron1.

dnsdist: Fix unlimited retries when TCP Fast Open is enabled

Using the same flag to indicate whether a connection was reused
after being pulled from the pool AND to know if the TFO flag should
be passed to sendmsg() led to an unlimited number of reconnection
attemps when TFO was enabled and the backend closed the connection
right after a write (sendmsg() succeeds then read() returns 0 right
away).

dnsdist: Check that we only retry 'retries' times even with TFO

Merge pull request #8069 from omoerbeek/rec-changelog-4.2.0

Changelog and secpoll for upcoming rec-4.2.0 release

Merge pull request #8042 from rgacogne/ddist-dnscrypt-certs

dnsdist: Accept more than one certificate in `addDNSCryptBind()`

dnsdist: Add a regression test for invalid DNS answer from the backend

Merge pull request #8075 from Habbie/raspbian-buster

builder: add raspbian-buster target

dnsdist: Catch exceptions thrown when handling a TCP response

We need to handle it gracefully if a function called from
handleResponse() throws, most likely because the answer received
from the backend was not valid.

enable a bunch of extra features during LGTM builds

Killed stray newlines

Add 8074

Merge pull request #8067 from rgacogne/circular_buffer_nodebug

Make sure we always compile with BOOST_CB_ENABLE_DEBUG set to 0

builder: add raspbian-buster target

State the effects of the new support policy.

BOOST_CB_ENABLE_DEBUG is overridden before 1.62, set BOOST_CB_DISABLE_DEBUG instead

Change security status of rec 4.2.0 prereleases

Changelog and secpoll for upcoming rec-4.2.0 release

Merge pull request #8053 from Habbie/pdnsutil-dead-code

pdnsutil: remove unused humanTime function

Make sure we always compile with BOOST_CB_ENABLE_DEBUG set to 0

Merge pull request #8066 from franklouwers/master

Auth-documentation: Fix typo

Update index.rst

Merge pull request #8065 from miesi/master

pdns/devpollmplexer: remove unused syncres.hh include

pdns/devpollmplexer: remove unused syncres.hh include

Merge pull request #8054 from mzealey/ueberbackend-fix-short-circuit

Fix SERVFAIL when backend returns empty DNSName

Merge pull request #8051 from Habbie/ixfrdist-chunksize

ixfrdist: limit XFR chunk size to 16k

Fix SERVFAIL when backend returns empty DNSName

According to the documentation on UeberBackend::getAuth(), a backend
returning an empty DNSName should signal that no matching parent zone
exists in this backend. However commit ae14c1f36a raises an exception if
isPartOf() is called on an empty DNSName so we need to switch the order
of the logic to prevent a SERVFAIL as a result.

pdnsutil: remove unused humanTime function

Merge pull request #8049 from Habbie/ixfrdist-circle

ixfrdist: test in CircleCI; remove useless error

ixfrdist: limit XFR chunk size to 16k

test ixfrdist in CircleCI

Merge pull request #8028 from Habbie/compress-16k

limit compression pointers to 14 bits