Merge branch 'master' into edmonds/libbsd-support

unbound.service.in: add StateDirectory

State directory will be created under /var/lib/unbound and will be
useful for writing various files managed at runtime like trust
anchors updates there instead of in ConfigureDirectory which could
be made read-only next. For this chroot needs to be disabled.

Move unbound_nochroot.service to unbound_portable.service

The real purpose of this service is to make it work with
https://systemd.io/PORTABLE_SERVICES/ which are incompatible with
chroot workarounds from original unbound.service.

The service content is identical to unbound.service with exception
for chroot related rules which were modified as needed.

unbound.service.in: add RuntimeDirectory and ConfigurationDirectory

Adding 'RuntimeDirectory' is needed when pidfile path is set to
subdirectory under /run.

Adding ConfigurationDirectory may help in some non-standard setups.

Also add more descriptions about used rules to avoid user confusion
about they meaning and purpose.

- Fix #153: Disable validation for DSA algorithms.  RFC 8624
  compliance.

Changelog note for PR#155.
- Merge PR#155 from Rober Edmonds: contrib/libunbound.pc.in: Fixes
  to Libs/Requires for crypto library dependencies.

Merge branch 'master' of github.com:NLnetLabs/unbound

Merge pull request #155 from edmonds/edmonds/pkg-config/libs-fixes

contrib/libunbound.pc.in: Fixes to Libs/Requires for crypto library dependencies

contrib/libunbound.pc.in: Embed the correct crypto dependencies

This commit removes the hardcoded dependency in the libunbound
pkg-config .pc file on the libcrypto and libssl modules and instead
populates the .pc file based on which crypto library was selected at
configure time.

Note that the .pc file specifies pkg-config module names for the
"Requires" line and this can vary from the library filename (e.g. "nss"
is the pkg-config module name vs. "nss3" being the library name).

contrib/libunbound.pc.in: Only specify -lunbound for Libs

According to the pkg-config manpage, the "Libs" line in a .pc file
should give the link flags "specific to your package", and specifically
says not to include link flags for dependencies:

    Libs:  This line should give the link flags specific to your
           package.  Don't add any flags for required packages;
           pkg-config will add those automatically.

Allow use of libbsd functions with configure option --with-libbsd

Add a new configure option `--with-libbsd', which allows to use libbsd's
portable implementations of:

    strlcpy strlcat arc4random arc4random_uniform reallocarray

instead of the embedded code copies in contrib/, which will be
difficult to maintain in the long term.

Also patch util/random.c so that, when building with libbsd and without
OpenSSL, arc4random can still be used as the PRNG.  Otherwise, building
with libnettle would need a kernel-specific getentropy implementation,
and libbsd does not export one.

[edmonds@debian.org: Imported patch description from BTS, refreshed
patch against Unbound 1.9.6.]

dnstap io, nicer layout for wouldblock calls.

dnstap io, fix event reference in winevent wouldblock call.

Merge branch 'master' into framestreams

Changelog and contrib/README note for PR#150.
- Merge PR#150 from Frzk: Systemd unit without chroot.  It add
  contrib/unbound_nochroot.service.in, a systemd file for use with
  chroot: "", see comments in the file, it uses systemd protections
  instead.

Merge pull request #150 from Frzk/systemd_unit_without_chroot

Systemd unit without chroot

dnstap io, remove --with-libfstrm, it is not required to build dnstap
support. protobuf-c is still used for handling the dnstap encoding.

Patch configure.ac file to take the new contrib/unbound_nochroot.service unit file in consideration.

All props to Wouter Wijngaards for this work.

dnstap io, remove libfstrm calls from dnstap.c.

Added a new unit file to run unbound with systemd and without chroot.

See https://github.com/NLnetLabs/unbound/pull/149

dnstap io, failure to add event closes and attempts to reopen the output.

in stop flush use timer_del to remove timer.

dnstap io, reconnect attempts with exponential backoff to once per second.

dnstap io, fixup error exit of event add routines.

dnstap io, sleeps thread when there is no traffic.

dnstap io, make sure to free current message when stream closes.

loop in output callback for performance.

check close neater also with a write at the same time.

dnstap io: check for close of channel by the other side.

dtio_find_msg loop roundrobin instead of first queue only, with
state in the dtio struct for loop iterator.

dnstap io fixup socket creation, stop flush dtio pointer, connect reports.

Update unbound_munin_

Add TLS (DoT) counters

dnstap io output performs nonblocking connect.

output event del before free.

write data and stop flush for dnstap io.

remove fatal_exit from runtime reopen routines.

improve fstrm routine documentation.

fstrm routines for start and stop, fstrm_create_control_frame_start and
fstrm_create_control_frame_stop, suitable for reuse, together with fstrm
protocol defines.

Remove editor file that was added by mistake.

iothread find msg.

iothread work.

the framestream queue.

dnstap unit test.

dnstap test program prints messages and timestamps in long format.

dnstap test program prints identity and version.

dnstap test progam can log on one line type,ip,qname,qtype,qclass

unbound-dnstap-socket debug test program.

iolist item added.

Writeup of FrameStreams protocol.

git branch to track feature for framestreams.  The aim is to make
reconnecting work, TLS support and not depend on the libfstrm library,
but keep compatibility with the Frame Streams protocol spec for
existing DNSTAP tools.

- extend rpz_respip.rpl with ipv6 without zz label case

- improve dname_has_label(), add unit test

Stream reuse branch, for TCP and TLS stream reuse.
This is for upstream pipes and using them again for the next query.

Signposted code for reuse_tcp structure in outside_network.h

- Add cname target wc synth. to testbound test

Revert travis verbosity

- Fix the dname_has_label fix

attemp to get more info out of travis

try to understand travis

Merge branch 'master' of github.com:NLnetLabs/unbound into rpz

- Fix faulty assert

- Fix doxygen issue

- fix compiler warnings

- processed RPZ review feedback
  - fix potential locking issue
  - add extra out of bound checks

- Implement RPZ CNAME target wildcard synthesis

- Fix auth zone support for NSEC3 records without salt.

- Fix for memory leak when edns subnet config options are read when
  compiled without edns subnet support.

- Fix crash after reload where a stats lookup could reference old key
  cache and neg cache structures.

- Removed the dnscrypt_queries and dnscrypt_queries_chacha tests,
  because dnscrypt-proxy (2.0.36) does not support the test setup
  any more, and also the config file format does not seem to have
  the appropriate keys to recreate that setup.

- Fix unreachable code in ssl set options code.

- Fix the relationship between serve-expired and prefetch options,
  patch from Saksham Manchanda from Secure64.

- Add changelog entry for fix #138 (stop binding pidfile inside chroot dir in
  systemd service file).

Merge pull request #142 from Maryse47/patch-1

unbound.service.in: stop binding pidfile inside chroot dir

unbound.service.in: stop binding pidfile inside chroot dir

Apparently pidfile isn't used inside chroot and binding it may cause some weird failures with older systemd.

Fixes https://github.com/NLnetLabs/unbound/issues/138

- And update for more spare space.

- Updated sldns_bget_token_par fix for also space for the zero
  delimiter after the character.

- Fix out-of-bounds null-byte write in sldns_bget_token_par while
  parsing type WKS, reported by Luis Merino from X41 D-Sec.

- Fix 'make test' to work for --disable-sha1 configure option.

- Changes to compat/getentropy_solaris.c for,
  ifdef stdint.h inclusion for older systems.
  ifdef sha2.h inclusion for older systems.

- Downgrade compat/getentropy_solaris.c to version 1.4 from OpenBSD.
  The dl_iterate_phdr() function introduced in newer versions raises
  compilation errors on solaris 10.

- Fix #140: Document slave not downloading new zonefile upon update.

(Changelog note for #135).
- Merge #135 from Florian Obser: Use passed in neg and key cache
  if non-NULL.

Merge pull request #135 from fobser/pass-in-neg-key-cache

Use passed in neg and key cache if non-NULL.

- Fix dname_has_label() code review changes

Proccess more review feedback

Use passed in neg and key cache if non-NULL.

With this the neg and key caches can be shared between multiple
libunbound contexts.

The msg and rrset caches already allowed this since context_finalize()
did not touch those if they are already available and have the correct
size.

Care must be taken to properly unhook the caches from the validator
environment before calling ub_ctx_delete() otherwise one risks double
free or use after free bugs.

- Update mailing list URL.

Fixup 1.9.7 version commit in configure.ac.

- Fix typo to let serve-expired-ttl work with ub_ctx_set_option(), by
  Florian Obser

Merge pull request #129 from fobser/serve-expired-ttl-typo

Fix typo to let serve-expired-ttl work with ub_ctx_set_option().

Make master 1.9.7 in development.

Fix typo to let serve-expired-ttl work with ub_ctx_set_option().

- Fix to make auth zone IXFR to fallback to AXFR if a single
  response RR is received over TCP with the SOA in it.

- Fix Makefile.in for ipset module compile, from Adi Prasaja.

- Fix ipsecmod compile.

- tag for 1.9.6rc1.

- unbound-fuzzers.tar.bz2: three programs for fuzzing, that are 1:1
  replacements for unbound-fuzzme.c that gets created after applying
  the contrib/unbound-fuzzme.patch.  They are contributed by
  Eric Sesterhenn from X41 D-Sec.

- Fix Make Test Fails when Configured With --enable-alloc-nonregional,
  reported by X41 D-Sec.

- update contrib/fastrpz.patch to apply more cleanly.

- Fix testbound for alloccheck runs, memory purify and lock checks.

- Fix lock type for memory purify log lock deletion.