Merge remote-tracking branch 'tor-gitlab/mr/426'

Merge branch 'tor-gitlab/mr/424'

Improve fname_is_c func in pratracker/includes.py

Use tuples for bname.startswith and fname.endswith in "fname_is_c"
function.

Add spaces between the "and" when logging the "Your server has not managed to confirm reachability for its" on dual-stack relays

Add reference implementation for ntor v3.

Initial backend for an ntor-v3 implementation.

This code is based directly on the specification, without looking at
the reference implementation or the implementation in Arti.
Nonetheless, it is now passing with the test vectors generated by
the reference implementation.

Remove changes files that have already been in changelogs for 0.4.6

Correct syntax & formatting in test_pratracker.sh

Use 4 spaces for indentations.
Use the same syntax for all functions.
No real code changes (except removal of unnecessary ";" from
"exit 1" command).

Merge remote-tracking branch 'tor-gitlab/mr/420'

Merge remote-tracking branch 'tor-gitlab/mr/419'

dir: Do not flag non-running failing HSDir

When a directory request fails, we flag the relay as non Running so we
don't use it anymore.

This can be problematic with onion services because there are cases
where a tor instance could have a lot of services, ephemeral ones, and
keeps failing to upload descriptors, let say due to a bad network, and
thus flag a lot of nodes as non Running which then in turn can not be
used for circuit building.

This commit makes it that we never flag nodes as non Running on a onion
service directory request (upload or fetch) failure as to keep the
hashring intact and not affect other parts of tor.

Fortunately, the onion service hashring is _not_ selected by looking at
the Running flag but since we do a 3-hop circuit to the HSDir, other
services on the same instance can influence each other by removing nodes
from the consensus for path selection.

This was made apparent with a small network that ran out of nodes to
used due to rapid succession of onion services uploading and failing.
See #40434 for details.

Fixes #40434

Signed-off-by: David Goulet <dgoulet@torproject.org>

Forward merge the latest ChangeLog/ReleaseNotes

Signed-off-by: David Goulet <dgoulet@torproject.org>

Merge branch 'maint-0.4.6'

Merge branch 'maint-0.4.5' into maint-0.4.6

Bump version to -dev

Signed-off-by: David Goulet <dgoulet@torproject.org>

Merge branch 'maint-0.3.5' into maint-0.4.5

Bump version to -dev

Signed-off-by: David Goulet <dgoulet@torproject.org>

Bump version to -dev

Signed-off-by: David Goulet <dgoulet@torproject.org>

Merge branch 'maint-0.4.6' into main

Merge branch 'maint-0.4.5' into maint-0.4.6

Always teardown capture of logs in CAPTURE().

This will hopefully solve an issue where our gmtime related tests are
failing on 32-bit builds.

Merge branch 'maint-0.4.6' into main

Merge branch 'maint-0.4.5' into maint-0.4.6

Merge branch 'maint-0.3.5' into maint-0.4.5

Use debian:buster instead of debian:stable for now.

Merge branch 'maint-0.4.6'

Merge branch 'maint-0.4.5' into maint-0.4.6

Disable message checking for some 32-bit tests about timegm failure.

Since we merged 40383, we don't expect these to give the same
warning on every platform.

Merge branch 'maint-0.4.6'

"ours" to avoid version bump.

Make the version 0.4.6.7, not 0.4.6.7-dev.

Merge branch 'maint-0.4.5' into maint-0.4.6

"ours" to avoid version bump

Make the version 0.4.5.10, not 0.4.5.10-dev.

Merge branch 'maint-0.3.5' into maint-0.4.5

"ours" to avoid version bump

Make the version 0.3.6.16, not 0.3.6.16-dev.

Update combine_libs script

Remove commented code from production.
Align indentations to 4 spaces.

Merge branch 'maint-0.4.6'

Merge branch 'maint-0.4.5' into maint-0.4.6

Merge branch 'maint-0.3.5' into maint-0.4.5

Update version to 0.3.5.16

Signed-off-by: David Goulet <dgoulet@torproject.org>

Update version to 0.4.5.10

Signed-off-by: David Goulet <dgoulet@torproject.org>

Update version to 0.4.6.7

Signed-off-by: David Goulet <dgoulet@torproject.org>

Merge branch 'maint-0.4.6'

Merge branch 'maint-0.4.5' into maint-0.4.6

Merge branch 'maint-0.3.5' into maint-0.4.5

Update GeoIP files to match IPFire location DB as per 2021/08/12.

Merge branch 'maint-0.4.6' into main

Merge branch 'maint-0.4.5' into maint-0.4.6

Merge branch 'maint-0.3.5' into maint-0.4.5

Merge remote-tracking branch 'tor-gitlab/mr/417' into maint-0.3.5

Merge branch 'maint-0.4.6' into main

Merge branch 'maint-0.4.5' into maint-0.4.6

Merge branch 'maint-0.3.5' into maint-0.4.5

Disable ed25519-donna's batch verification.

Fixes bug 40078.

As reported by hdevalence our batch verification logic can cause an assert
crash.

The assert happens because when the batch verification of ed25519-donna fails,
the code in `ed25519_checksig_batch()` falls back to doing a single
verification for each signature.

The crash occurs because batch verification failed, but then all signatures
individually verified just fine.

That's because batch verification and single verification use a different
equation which means that there are sigs that can pass single verification
but fail batch verification.

Fixing this would require modding ed25519-donna which is not in scope for
this ticket, and will be soon deprecated in favor of arti and
ed25519-dalek, so my branch instead removes batch verification.

Merge branch 'maint-0.4.6' into main

Merge branch 'maint-0.4.5' into maint-0.4.6

fallbackdir: Regenerate list

New list for all stable releases.

Closes #40447

Signed-off-by: David Goulet <dgoulet@torproject.org>

Merge branch 'maint-0.3.5' into maint-0.4.5

relay: Reduce streaming compression ratio from HIGH to LOW

Fixes #40301

Signed-off-by: David Goulet <dgoulet@torproject.org>

Merge branch 'maint-0.4.6' into main

Merge branch 'maint-0.4.5' into maint-0.4.6

relay: Reduce streaming compression ratio from HIGH to LOW

Fixes #40301

Signed-off-by: David Goulet <dgoulet@torproject.org>

Make inbuf and outbuf len check params const

MAKEFILE: include new CC algs in makefile

TOR_NOLA: Implement a pure BDP tracking CC alg

How come no one ever named a congestion control algorithm after New Orleans?

TOR_VEGAS: Implement Prop#324 TOR_VEGAS.

TOR_WESTWOOD: Implement Prop#324 TOR_WESTWOOD

Prop#324: Free congestion control object on circ and cpath

Prop#324: Hook up CC window checks for relay cell packaging

Prop#324: Hook up CC algs to main sendme callpoints

Prop#324: Add congestion control state to structs

Prop#324: Common RTT, BDP, and blocked channel signal support

Merge branch 'vanguards-lite-dev-rebased'

Merge remote-tracking branch 'tor-gitlab/mr/412'

Correct another ReleasingTor.md issue

Update ReleasingTor.md to reflect current practice

circpad: Be smarter on when to send back STOP cells.

Update changes file with the new proposal number #333.

Increase frequency of vg-lite callback to 15 minutes

Remove some needless includes

Remove fuzz_hexdigest.c: It is already covered by other fuzzers

Merge remote-tracking branch 'tor-gitlab/mr/407'

test_hs_ob: initialize pointers to NULL

This is an attempt to fix CID 1486280, where coverity warns us that,
if the tests failed, we might free() an uninitialized pointer.

test_hs_control: initialize pointers to NULL

This is an attempt to fix CID 1486276, where coverity warns us that,
if the tests failed, we might free() an uninitialized pointer.

Add stricter limits to the number of L2 nodes

Add a switch to toggle the feature on/off

Service intro circuits are now 4-hop to avoid linkability by intro

Now the circuits look like this:

 client rend:   C -> G -> L2 -> Rend
 client intro:  C -> G -> L2 -> M -> Intro
 client hsdir:  C -> G -> L2 -> M -> HSDir
 service rend:  C -> G -> L2 -> M -> Rend
 service intro: C -> G -> L2 -> M -> Intro
 service hsdir: C -> G -> L2 -> M -> HSDir

Add layer2_guard_free()

Don't double-pick L2 nodes

Merge remote-tracking branch 'tor-gitlab/mr/410'

Merge branch 'maint-0.4.6'

Merge remote-tracking branch 'tor-gitlab/mr/406' into maint-0.4.6

Merge remote-tracking branch 'tor-gitlab/mr/406'

Update torrc to encourage use of BridgeDistribution

Bridge operators should generally publish their descriptors except for
rare cases, and instead use the BridgeDistribution none setting to
prevent their bridge from being distributed by BridgeDB.

Merge branch 'maint-0.4.6'

Merge branch 'maint-0.4.5' into maint-0.4.6

Merge remote-tracking branch 'tor-gitlab/mr/409' into maint-0.4.5

Merge branch 'maint-0.4.6'

Merge branch 'maint-0.4.5' into maint-0.4.6

Merge branch 'mr/395' into maint-0.4.5

Use native timegm when available.

Continue having a tor_gmtime_impl() unit test so that we can detect
any problems in our replacement function; add a new test function to
make sure that gmtime<->timegm are a round-trip on now-ish times.

This is a fix for bug #40383, wherein we ran into trouble because
tor_timegm() does not believe that time_t should include a count of
leap seconds, but FreeBSD's gmtime believes that it should.  This
disagreement meant that for a certain amount of time each day,
instead of calculating the most recent midnight, our voting-schedule
functions would calculate the second-most-recent midnight, and lead
to an assertion failure.

I am calling this a bugfix on 0.2.0.3-alpha when we first started
calculating our voting schedule in this way.