Introduce vanguards-lite subsystem and some of its entry points

Co-authored-by: Mike Perry <mikeperry-git@torproject.org>

Merge remote-tracking branch 'tor-gitlab/mr/405'

Merge branch 'maint-0.4.6'

"ours" to avoid version bump.

Bump to 0.4.6.6-dev

Tweak 0466 changelog

Merge branch 'maint-0.4.6'

"ours" to avoid version bump.

Update version to 0.4.6.6.

Merge branch 'maint-0.4.6'

Merge branch 'maint-0.4.5' into maint-0.4.6

Missing changes file for #40409

Merge branch 'tor-gitlab/mr/275'

Merge branch 'maint-0.4.5' into maint-0.4.6

Merge branch 'maint-0.4.6'

If TestingTorNetwork, skip perm check on the hs directory

Suppress strict-prototypes warning on NSS pk11pub.h header

We already did this in a couple of places, but there are more that
we didn't get.  This is necessary for systems with versions of
NSS that don't do their prototypes properly.

Fixes #40409; bugfix on 0.3.5.1-alpha.

Merge remote-tracking branch 'tor-gitlab/mr/385'

Merge branch 'maint-0.4.5' into maint-0.4.6

Merge branch 'maint-0.4.6'

Enable deterministic RNG for address set tests.

This patch enables the deterministic RNG for address set tests,
including the tests which uses address set indirectly via the nodelist
API.

This should prevent random test failures in the highly unlikely case of
a false positive which was seen in tor#40419.

See: tpo/core/tor#40419.

Merge branch 'maint-0.4.6'

Fix compilation on systems with older compilers.

This patch fixes a build error with GCC 7.x which doesn't seem to accept
const int's as constants in macro initialization.

See: tpo/core/tor#40410

git: Don't pull github anymore in git-pull-all.sh

Signed-off-by: David Goulet <dgoulet@torproject.org>

Merge remote-tracking branch 'tor-gitlab/mr/338'

Merge remote-tracking branch 'tor-gitlab/mr/397'

Copy forward ChangeLog and ReleaseNotes from 0.3.5.15, 0.4.4.9, and 0.4.5.9

Copy the 0.4.6.5 changelog and releasenotes to main.

Remove 0.4.4 from list-tor-branches.

Merge branch 'maint-0.4.6'

"ours" to avoid version bump.

Bump to 0.4.6.5-dev

Merge branch 'maint-0.4.5' into maint-0.4.6

"Ours" to avoid version bump.

Bump to 0.4.5.9-dev

Merge branch 'maint-0.4.4' into maint-0.4.5

Merge branch 'maint-0.3.5' into maint-0.4.4

"ours" to avoid version bump.

Bump to 0.3.5.15-dev

Merge branch 'maint-0.4.6'

Merge branch 'maint-0.4.5' into maint-0.4.6

Merge branch 'maint-0.4.4' into maint-0.4.5

Merge branch 'maint-0.3.5' into maint-0.4.4

Fix TROVE-2021-006: Out-of-bounds read on v3 desc parsing

Merge branch 'maint-0.4.6'

Merge branch 'maint-0.4.5' into maint-0.4.6

Merge branch 'maint-0.4.4' into maint-0.4.5

Resolve remaining merge conflicts in relay.c

(My bad!)

Merge branch 'maint-0.4.6'

Merge branch 'maint-0.4.5' into maint-0.4.6

Merge branch 'maint-0.4.4' into maint-0.4.5

Merge branch 'maint-0.3.5' into maint-0.4.4

Conflicts resolved:
src/core/or/relay.c

TROVE-2021-003: Check layer_hint before half-closed end and resolve cells

This issue was reported by Jann Horn part of Google's Project Zero.

Jann's one-sentence summary: entry/middle relays can spoof RELAY_END cells on
half-closed streams, which can lead to stream confusion between OP and
exit.

Fixes #40389

Merge branch 'maint-0.4.6'

Merge branch 'maint-0.4.5' into maint-0.4.6

Merge branch 'maint-0.4.4' into maint-0.4.5

Merge branch 'maint-0.3.5' into maint-0.4.4

Merge branch 'bug40391_035' into maint-0.3.5

Merge branch 'maint-0.4.6'

Merge branch 'maint-0.4.5' into maint-0.4.6

Merge branch 'maint-0.4.4' into maint-0.4.5

Merge branch 'maint-0.3.5' into maint-0.4.4

Merge branch 'bug40390_035_squashed' into maint-0.3.5

Assert on _all_ failures from RAND_bytes().

Previously, we would detect errors from a missing RNG
implementation, but not failures from the RNG code itself.

Fortunately, it appears those failures do not happen in practice
when Tor is using OpenSSL's default RNG implementation.  Fixes bug
40390; bugfix on 0.2.8.1-alpha. This issue is also tracked as
TROVE-2021-004. Reported by Jann Horn at Google's Project Zero.

Merge branch 'maint-0.4.6'

Merge branch 'maint-0.4.5' into maint-0.4.6

Merge branch 'maint-0.4.4' into maint-0.4.5

Merge branch 'maint-0.3.5' into maint-0.4.4

Update geoip files to match ipfire location db, 2021/06/10.

Modernize our libfuzzer usage to close #40407

Additionally, remove lingering references to hsv2 fuzzers from the
fuzzing_include_am.py script.

Add links to original design paper and anonbib

Closes #33742

Add a checklist to releasingtor.md

Copy 0.4.5.8 changelog into the main branch changelog.

Merge branch 'maint-0.4.6'

"ours" to avoid version bump.

Bump to 0.4.6.5

Merge branch 'maint-0.4.5' into maint-0.4.6

"ours" to avoid version bump.

Bump to 0.4.5.9.

Merge branch 'maint-0.4.4' into maint-0.4.5

"ours" to avoid version bump.

Bump to 0.4.4.9

Merge branch 'maint-0.3.5' into maint-0.4.4

Bump to 0.3.5.15.

Merge branch 'maint-0.4.6'

Merge branch 'bug40175_045' into maint-0.4.6

changes file for #40175

Merge branch 'maint-0.4.6'

Merge branch 'tor-gitlab/mr/393' into maint-0.4.6

copy 0.4.6.4-rc changelog forward

Merge branch 'maint-0.4.6'

"ours" to avoid version bump.

Bump to 0.4.6.4-rc-dev

Merge branch 'maint-0.4.6'

"ours" to avoid version bump.

Bump to 0.4.6.4-rc.

Merge branch 'maint-0.4.6'

Merge branch 'maint-0.4.5' into maint-0.4.6

Stop using the "x$FOO" idiom in git-resquash.sh

The new version of shellcheck says that that this idiom is
unnecessary, and its presence here is making the shellcheck tests
fail.

No changes file needed, since this is not user-facing code.

clarify three comments

based on code-spelunking with nickm

Upgrade and rate-limit compression failure message.

Without this message getting logged at 'WARN', it's hard to
contextualize the messages we get about compression bombs, so this
message should fix #40175.

I'm rate-limiting this, however, since it _could_ get spammy if
somebody on the network starts acting up.  (Right now it should be
very quiet; I've asked Sebastian to check it, and he says that he
doesn't hit this message in practice.)

Closes #40175.

Merge branch 'tor-gitlab/mr/359'

Merge branch 'maint-0.4.6'

Merge branch 'tor-gitlab/mr/392' into maint-0.4.6

Prefer mmap()ed consensus files over cached_dir_t entries.

Cached_dir_t is a somewhat "legacy" kind of storage when used for
consensus documents, and it appears that there are cases when
changing our settings causes us to stop updating those entries.

This can cause trouble, as @arma found out in #40375, where he
changed his settings around, and consensus diff application got
messed up: consensus diffs were being _requested_ based on the
latest consensus, but were being (incorrectly) applied to a
consensus that was no longer the latest one.

This patch is a minimal fix for backporting purposes: it has Tor do
the same search when applying consensus diffs as we use to request
them.  This should be sufficient for correct behavior.

There's a similar case in GETINFO handling; I've fixed that too.

Fixes #40375; bugfix on 0.3.1.1-alpha.

Merge remote-tracking branch 'tor-gitlab/mr/388' into main

Merge remote-tracking branch 'tor-gitlab/mr/380' into main

Merge branch 'maint-0.3.5' into maint-0.4.4

Merge branch 'maint-0.4.4' into maint-0.4.5

Merge branch 'maint-0.4.5' into maint-0.4.6