string: Add extra UTF-8 test cases

These test cases are validated differently by some
programming languages, because those languages have
incorrect UTF-8 implementations.

We want to make sure that tor validates them correctly.

Closes ticket 32845.

Merge branch 'haxxpop/tcp_proxy_squashed' into tcp_proxy_squshed_and_merged

circuit: Add change file

test: HTTP CONNECT protocol

test: HAPRoxy protocol

test: Implement haproxy

circuit: Implement haproxy

Merge remote-tracking branch 'tor-github/pr/1615'

Add documentation about building a TAGS file.

Patch from opara.  Closes ticket 32779.

Merge remote-tracking branch 'tor-github/pr/1620'

Merge branch 'maint-0.4.2'

Merge remote-tracking branch 'tor-github/pr/1612' into maint-0.4.2

Merge branch 'maint-0.4.2'

Merge branch 'maint-0.4.1' into maint-0.4.2

update changes file to pass "make check-changes"

Merge branch 'maint-0.4.1' into maint-0.4.2

Fix sandbox crash during reload of logging configuration

Allow calls to dup() which was introduced in commit a22fbab986.

From a security perspective, I don't think this should impact the
security of the sandbox significantly. As far as I can tell, there
is nothing an adversary can do with a duplicated FD that can't be
done with the original.

Fix spacing in tor_sscanf() call in tor_inet_aton()

Fix spacing in tor_inet_aton() function header

Merge branch 'bug29819_035'

Merge remote-tracking branch 'tor-github/pr/1623'

Replace several C identifiers.

This is an automated commit, generated by this command:

./scripts/maint/rename_c_identifier.py \
        EXPOSE_CLEAN_BACKTRACE BACKTRACE_PRIVATE \
        TOR_CHANNEL_INTERNAL_ CHANNEL_OBJECT_PRIVATE \
        CHANNEL_PRIVATE_ CHANNEL_FILE_PRIVATE \
        EXPOSE_ROUTERDESC_TOKEN_TABLE ROUTERDESC_TOKEN_TABLE_PRIVATE \
        SCHEDULER_PRIVATE_ SCHEDULER_PRIVATE

Merge branch 'maint-0.4.2'

Merge branch 'maint-0.4.1' into maint-0.4.2

Merge branch 'maint-0.4.0' into maint-0.4.1

Merge remote-tracking branch 'tor-github/pr/1606'

Code Style: Delete headers that are included twice

These changes were created using the "make autostyle" from
32522, and then split into commits.

Code Style: Delete PRIVATE defines that are never used

Some ".c" files define *_PRIVATE macros, but those macros are
not used in any header file. Delete them.

These changes were created using the "make autostyle" from
32522, and then split into commits.

Run "make autostyle"

Makefile/git scripts: Add comments to keep owned file lists in sync

Mark TestingEstimatedDescriptorPropagationTime as obsolete.

We stopped looking at this option in 85cf6dcba3693b, back when we
implemented the minimal pieces of prop275.  Since then, we've had
code to validate and adjust this option, and to give it a different
value in testing networks, but the option hasn't actually done
anything.

We can safely mark it as OBSOLETE, since doing so does not make any
old configuration get rejected.

Closes ticket 32807.

Merge branch 'dirauth_config_squashed'

Declare relay/dirauth subsystem levels in a header.

This way, we can't get out of sync between the two declarations.

Add an integration test for options disabled by dirauth subsystem.

Add config object for dirauth; move one option there.

I've chosen the "AuthDirMaxServersPerAddr" option here for
simplicity, since it is used literally nowhere else besides the dirauth
module.  Once we have all the infrastructure in place for this, we
can move more options into this structure.

Allow struct_magic to be disabled.

When a subsystem is disabled, there will be no corresponding object
allocated, and no magic numbers on it.

Support a flag to indicate that a config var is disabled

Like "obsolete" variables, these variables produce a warning when
you try to set them, but the warning says that the relevant module
doesn't have support.

The confdecl macros now have a CONF_CONTEXT that you can define to
make all the modules in a given table disabled.

Add "stub" files for disabled modules.

These modules are only built when the selected modules are disabled.
The provide stub implementations of the subsystem blocks.  Later,
other stub implementations could move here.

Having real subsystem blocks here will let us handle disabled
configuration options better.

Merge remote-tracking branch 'tor-github/pr/1584'

Merge branch 'tor-github/pr/1587'

Add NSF support acknowledgment to circpad dev doc.

Merge branch 'ticket32172_once_again'

Correct how we use libseccomp

This fixes a startup crash with libseccomp v2.4.0 if Sandbox is
set to 1.

Merge remote-tracking branch 'tor-github/pr/1596'

Merge branch 'tor-github/pr/1608'

Merge branch 'tor-github/pr/1609'

Merge branch 'pr1590_amended_commit'

manpage: fixes to alphabetize General Options

Fix formatting in tor_assertf() message in struct_check_magic().

Closes 32771; bugfix on 0.4.2.1-alpha.

Merge branch 'bug32765_041' into bug32771_042

Use CHECK_PRINTF() for printf-like functions in util_bug.h

Merge branch 'tor-github/pr/1591'

Add changes file

Add circuit padding developer and quickstart docs.

Compact lines in test_e2e_rend_circuit_setup()

Remove extra space from helper_get_circ_and_stream_for_test() call in test_e2e_rend_circuit_setup()

Merge branch 'bug32240_32242_042' into bug32240_32242_master

Merge:
* libzstd-dev from ticket32242_042
* coccinelle from master

Merge branch 'bug32240_32242_041' into bug32240_32242_042

Merge branch 'bug32240_32242_040' into bug32240_32242_041

Merge branch 'bug32240_32242_035' into bug32240_32242_040

Merge:
* libzstd-dev from ticket32242_035
* shellcheck from maint-0.4.0

Merge remote-tracking branch 'tor-github/pr/1459' into bug32240_32242_035

Merge branch 'bug32240_042' into bug32240_master

Merge branch 'bug32240_041' into bug32240_042

Merge:
* CHUTNEY_TOR_SANDBOX=0 from bug32240_041
* RUST_VERSION from maint-0.4.2

Merge branch 'bug32240_040' into bug32240_041

Merge branch 'bug32240_035' into bug32240_040

Merge branch 'bug32240_029' into bug32240_035

Merge
* Chutney Trusty deletion in bug32240_029
* NSS addition in maint-0.3.5

changes: file for 32240

Travis: Run Chutney jobs in Ubuntu Bionic images

Closes 32240.

Travis: Turn off Tor's Sandbox in Chutney jobs

We need to set "Sandbox 0", until we fix sandbox errors that are
triggered by Ubuntu Xenial and Bionic. See 32722.

Part of 32240.

Merge branch 'maint-0.4.2'

Merge branch 'maint-0.4.1' into maint-0.4.2

Merge branch 'maint-0.4.0' into maint-0.4.1

Merge branch 'maint-0.3.5' into maint-0.4.0

Merge branch 'maint-0.2.9' into maint-0.3.5

Merge remote-tracking branch 'tor-github/pr/1505'

Merge remote-tracking branch 'tor-github/pr/1577' into maint-0.4.2

Merge remote-tracking branch 'tor-github/pr/1576' into maint-0.3.5

Merge remote-tracking branch 'tor-github/pr/1575' into maint-0.2.9

Add torint.h include to confdecl.h.

This change allows other modules to include confdecl.h without
having first to include integer types they might not even use.

Merge remote-tracking branch 'tor-github/pr/1598'

manpage: fix some quoting

Fix some quoting, especially of constructs like "[address:]port", that
were proving tricky for Asciidoctor tooling to parse correctly.

Also fix formatting of some configuration variable names that
contained double underscores.  Neither asciidoc nor asciidoctor was
rendering some of those correctly.

Part of ticket 32708.

manpage: section titles to 1-line

Change the section title formatting to use the one-line format.  This
allows Asciidoctor-based tooling to parse it more easily.

Part of ticket 32708.

manpage: indent linebreak markup

Indent the asciidoc markup for lone linebreaks to match the preceding
paragraph line, so that Asciidoctor tools can format them correctly.

Part of ticket 32708.

changes file for ticket 32708

manpage: minor formatting fixes

These are unrelated changes done by Swati while doing the alphabetizing.

Part of ticket 32708.

manpage: alphabetize General Options

Part of ticket 32708.

changes: update changes file for 32609

Makefile: Remove the broken, duplicate check-practracker-unit-test

This test doesn't set PYTHON, and ignores USE_PYTHON. And it's already
listed in TEST_SCRIPTS.

Fixes CI issue 32705.

src/ext: Add __future__ imports for python 3 compatibility

Closes ticket 32732.

python: Add __future__ imports for python 3 compatibility

Except for src/ext, which we may not want to modify.

Closes ticket 32732.

Document high-level architecture goals

Create a high-level description of the long-term software architecture
goals.  Closes ticket 32206.

Add a changes file for ticket 32172.

set up tmp dir for test suite to run on Android

There is no /tmp or mkdtemp on Android, there is /data/local/tmp for
root and the shell user. So this fakes mkdtemp.  Also, FYI, tor might
not like the default perms of /data/local/tmp, e.g. 0770.

https://trac.torproject.org/projects/tor/ticket/32172

In cancel_descriptor_fetches(), use connection_list_by_type_purpose() instead of connection_list_by_type_state()

Merge branch 'tor-github/pr/1581'

hs-v3: Handle client rendezvous circuit timeout

With v3, the "pending_final_cpath" of a circuit is always NULL which means
that for v3, established client rendezvous circuit waiting for the intro point
to ACK, will always end up timing out quickly.

This can increase the delays to which you connect to a service since in order
to succeed, the rendezvous circuit needs to fully established
(CIRCUIT_PURPOSE_C_REND_JOINED) within the cutoff of the introduction circuit
as well which is these days around 2-3 seconds.

Fixes #32021

Signed-off-by: David Goulet <dgoulet@torproject.org>

Merge branch 'tor-github/pr/1583'

hs-v3: Fix memory leak in test_hs_control_store_permanent_creds()

Merge branch 'maint-0.4.2'

"ours" to avoid version bump.

bump to 0.4.2.5-dev