Turn several functions from stubs into macros

This may help the compiler eliminate deadcode.

Rename dirclient_modes.h identifiers to start with dirclient_

This is an automated commit, generated by this command:

./scripts/maint/rename_c_identifier.py \
        directory_must_use_begindir dirclient_must_use_begindir \
        directory_fetches_from_authorities dirclient_fetches_from_authorities \
        directory_fetches_dir_info_early dirclient_fetches_dir_info_early \
        directory_fetches_dir_info_later dirclient_fetches_dir_info_later \
        directory_too_idle_to_fetch_descriptors dirclient_too_idle_to_fetch_descriptors

Move directory_must_use_begindir() to dirclient_modes.[ch]

Move dirclient-related functions out of dirserv, and reenable them

I had incorrectly identified these functions as dircache-only, when
in fact they apply to everyone who acts a directory client.

Add a changes file for disabling the dircache code.

Disable feature/dircache files when dircache module is disabled.

To make Tor still work, we define a minimal dircache_stub.c file
that defines the entry points to the module that can actually be
seen by the compiler when we're building with dircache and relay
disabled.

Use dir_conn_clear_spool() in connection.c.

This is cleaner than iterating over the spool.

Move dirserv_get_routerdescs() to control_getinfo.c

This function had some XXX comments indicating (correctly) that it
was not actually used by the dirserver code, and that only the
controller still used it.

Move dir_split_resource_into_spoolable() to dircache module.

Only directory caches actually need to spool things.

Define a "dircache" module.

For now, this module is enabled whenever the relay module is
enabled, and disabled whenever the relay module is disabled.  Though
they are logically separate, the use cases for running one without
the other are rare enough that we don't really want to support
compiling them independently.

core/include.am: spelling fix

It's 2020. Update the copyright dates with "make update-copyright"

Run "make autostyle"; add an endif comment

router: Improve port search function comments

speaking of utf-8, remove strange char from comment

Merge branch 'ticket32845_squashed'

changes: file for 32845

string: Check UTF-8 string pointer and length

If they are inconsistent, output a raw bug log.

Part of 32845.

Merge remote-tracking branch 'tor-github/pr/1640'

test_helpers: add a missing free for CID 1457527.

Add new state to connection_proxy_state_to_string()

Also, add a CTASSERT() to make sure that we don't let this array get
out-of-sync again.

Found by coverity; this is CID 1457528.

string: Add extra UTF-8 test cases

These test cases are validated differently by some
programming languages, because those languages have
incorrect UTF-8 implementations.

We want to make sure that tor validates them correctly.

Closes ticket 32845.

Space the a-d unsigned ints in tor_inet_aton()

Merge branch 'haxxpop/tcp_proxy_squashed' into tcp_proxy_squshed_and_merged

circuit: Add change file

test: HTTP CONNECT protocol

test: HAPRoxy protocol

test: Implement haproxy

circuit: Implement haproxy

Merge remote-tracking branch 'tor-github/pr/1615'

Add documentation about building a TAGS file.

Patch from opara.  Closes ticket 32779.

Merge remote-tracking branch 'tor-github/pr/1620'

Merge branch 'maint-0.4.2'

Merge remote-tracking branch 'tor-github/pr/1612' into maint-0.4.2

Merge branch 'maint-0.4.2'

Merge branch 'maint-0.4.1' into maint-0.4.2

update changes file to pass "make check-changes"

Merge branch 'maint-0.4.1' into maint-0.4.2

Fix sandbox crash during reload of logging configuration

Allow calls to dup() which was introduced in commit a22fbab986.

From a security perspective, I don't think this should impact the
security of the sandbox significantly. As far as I can tell, there
is nothing an adversary can do with a duplicated FD that can't be
done with the original.

Fix spacing in tor_sscanf() call in tor_inet_aton()

Fix spacing in tor_inet_aton() function header

Merge branch 'bug29819_035'

Merge remote-tracking branch 'tor-github/pr/1623'

Replace several C identifiers.

This is an automated commit, generated by this command:

./scripts/maint/rename_c_identifier.py \
        EXPOSE_CLEAN_BACKTRACE BACKTRACE_PRIVATE \
        TOR_CHANNEL_INTERNAL_ CHANNEL_OBJECT_PRIVATE \
        CHANNEL_PRIVATE_ CHANNEL_FILE_PRIVATE \
        EXPOSE_ROUTERDESC_TOKEN_TABLE ROUTERDESC_TOKEN_TABLE_PRIVATE \
        SCHEDULER_PRIVATE_ SCHEDULER_PRIVATE

Merge branch 'maint-0.4.2'

Merge branch 'maint-0.4.1' into maint-0.4.2

Merge branch 'maint-0.4.0' into maint-0.4.1

Merge remote-tracking branch 'tor-github/pr/1606'

Code Style: Delete headers that are included twice

These changes were created using the "make autostyle" from
32522, and then split into commits.

Code Style: Delete PRIVATE defines that are never used

Some ".c" files define *_PRIVATE macros, but those macros are
not used in any header file. Delete them.

These changes were created using the "make autostyle" from
32522, and then split into commits.

Run "make autostyle"

Makefile/git scripts: Add comments to keep owned file lists in sync

Mark TestingEstimatedDescriptorPropagationTime as obsolete.

We stopped looking at this option in 85cf6dcba3693b, back when we
implemented the minimal pieces of prop275.  Since then, we've had
code to validate and adjust this option, and to give it a different
value in testing networks, but the option hasn't actually done
anything.

We can safely mark it as OBSOLETE, since doing so does not make any
old configuration get rejected.

Closes ticket 32807.

Merge branch 'dirauth_config_squashed'

Declare relay/dirauth subsystem levels in a header.

This way, we can't get out of sync between the two declarations.

Add an integration test for options disabled by dirauth subsystem.

Add config object for dirauth; move one option there.

I've chosen the "AuthDirMaxServersPerAddr" option here for
simplicity, since it is used literally nowhere else besides the dirauth
module.  Once we have all the infrastructure in place for this, we
can move more options into this structure.

Allow struct_magic to be disabled.

When a subsystem is disabled, there will be no corresponding object
allocated, and no magic numbers on it.

Support a flag to indicate that a config var is disabled

Like "obsolete" variables, these variables produce a warning when
you try to set them, but the warning says that the relevant module
doesn't have support.

The confdecl macros now have a CONF_CONTEXT that you can define to
make all the modules in a given table disabled.

Add "stub" files for disabled modules.

These modules are only built when the selected modules are disabled.
The provide stub implementations of the subsystem blocks.  Later,
other stub implementations could move here.

Having real subsystem blocks here will let us handle disabled
configuration options better.

Merge remote-tracking branch 'tor-github/pr/1584'

Merge branch 'tor-github/pr/1587'

Add NSF support acknowledgment to circpad dev doc.

Merge branch 'ticket32172_once_again'

Correct how we use libseccomp

This fixes a startup crash with libseccomp v2.4.0 if Sandbox is
set to 1.

Merge remote-tracking branch 'tor-github/pr/1596'

Merge branch 'tor-github/pr/1608'

Merge branch 'tor-github/pr/1609'

Merge branch 'pr1590_amended_commit'

manpage: fixes to alphabetize General Options

Fix formatting in tor_assertf() message in struct_check_magic().

Closes 32771; bugfix on 0.4.2.1-alpha.

Merge branch 'bug32765_041' into bug32771_042

Use CHECK_PRINTF() for printf-like functions in util_bug.h

Merge branch 'tor-github/pr/1591'

Add changes file

Add circuit padding developer and quickstart docs.

Compact lines in test_e2e_rend_circuit_setup()

Remove extra space from helper_get_circ_and_stream_for_test() call in test_e2e_rend_circuit_setup()

Merge branch 'bug32240_32242_042' into bug32240_32242_master

Merge:
* libzstd-dev from ticket32242_042
* coccinelle from master

Merge branch 'bug32240_32242_041' into bug32240_32242_042

Merge branch 'bug32240_32242_040' into bug32240_32242_041

Merge branch 'bug32240_32242_035' into bug32240_32242_040

Merge:
* libzstd-dev from ticket32242_035
* shellcheck from maint-0.4.0

Merge remote-tracking branch 'tor-github/pr/1459' into bug32240_32242_035

Merge branch 'bug32240_042' into bug32240_master

Merge branch 'bug32240_041' into bug32240_042

Merge:
* CHUTNEY_TOR_SANDBOX=0 from bug32240_041
* RUST_VERSION from maint-0.4.2

Merge branch 'bug32240_040' into bug32240_041

Merge branch 'bug32240_035' into bug32240_040

Merge branch 'bug32240_029' into bug32240_035

Merge
* Chutney Trusty deletion in bug32240_029
* NSS addition in maint-0.3.5

changes: file for 32240

Travis: Run Chutney jobs in Ubuntu Bionic images

Closes 32240.

Travis: Turn off Tor's Sandbox in Chutney jobs

We need to set "Sandbox 0", until we fix sandbox errors that are
triggered by Ubuntu Xenial and Bionic. See 32722.

Part of 32240.

Merge branch 'maint-0.4.2'

Merge branch 'maint-0.4.1' into maint-0.4.2

Merge branch 'maint-0.4.0' into maint-0.4.1

Merge branch 'maint-0.3.5' into maint-0.4.0

Merge branch 'maint-0.2.9' into maint-0.3.5

Merge remote-tracking branch 'tor-github/pr/1505'

Merge remote-tracking branch 'tor-github/pr/1577' into maint-0.4.2

Merge remote-tracking branch 'tor-github/pr/1576' into maint-0.3.5

Merge remote-tracking branch 'tor-github/pr/1575' into maint-0.2.9