Merge branch 'tor-github/pr/690'

Merge branch 'tor-github/pr/671'

On windows, if we fail to load a consensus and it has a CRLF, retry.

Fixes bug 28614; bugfix on 0.4.0.1-alpha when we started mmapping
the consensus.

Merge branch 'maint-0.3.5'

Merge branch 'maint-0.3.4' into maint-0.3.5

Merge branch 'maint-0.3.3' into maint-0.3.4

Merge branch 'maint-0.2.9' into maint-0.3.3

Merge branch 'maint-0.3.5'

test: Fix a warning underflow in rend_cache/clean

Because the test is adding entries to the "rend_cache" directly, the
rend_cache_increment_allocation() was never called which made the
rend_cache_clean() call trigger that underflow warning:

rend_cache/clean: [forking] Nov 29 09:55:04.024 [warn] rend_cache_decrement_allocation(): Bug: Underflow in rend_cache_decrement_allocation (on Tor 0.4.0.0-alpha-dev 2240fe63feb9a8cf)

The test is still good and valid.

Fixes #28660

Signed-off-by: David Goulet <dgoulet@torproject.org>

Update geoip and geoip6 to the February 5 2019 database.

Merge branch 'maint-0.3.5'

Merge branch 'ticket29040_1_changes' into maint-0.3.5

Add changes file for bug 29040.

Merge branch 'maint-0.3.5'

Merge remote-tracking branch 'tor-github/pr/670' into maint-0.3.5

Merge branch 'maint-0.3.5'

Merge branch 'maint-0.3.4' into maint-0.3.5

Merge branch 'maint-0.3.3' into maint-0.3.4

Add release note for bug 29150

Update Cargo.lock with new comment; suppress 29244.

Write consensus files in binary mode

This will help us out on windows now that we mmap files.  Fixes part
of ticket 28614.

Allow empty username/password in SOCKS5 username/password auth message

One more 32-bit clang warning

Use tt_u64_op() in test_circuitpadding.c to fix compilation warnings

Fixes bug 29169.

Merge branch 'precommit_squashed'

Only run the checkIncludes.py script if it exists

(It was added in 0.3.5)

lintChanges.py didn't take a directory argument in 0.2.9

Also run checkInclude.py before every commit

Add a pre-commit hook that runs code and changelog entry formatting checks

hs-v3: add an option param to safe log functions

We add an option param to safe_str and safe_str_client because in
some case we need to use those functions before global_options is set.

hs-v3: fix use after free in client auth config

We accidentally use `auth` after freeing it in
client_service_authorization_free. The way to solve it is to
free after using it.

Merge branch 'maint-0.3.5'

Log an HSDesc we failed to parse at Debug loglevel

Merge branch 'maint-0.3.5'

Merge branch 'maint-0.3.3' into maint-0.3.4

Merge branch 'maint-0.3.4' into maint-0.3.5

Merge branch 'maint-0.2.9' into maint-0.3.3

"ours" merge to avoid dropping non-broken changes files after
removal of merged 0.2.9 changes files.

maint-0.2.9: remove changes files that are merged in 0.2.9 releases

Many of these files cause check-changes to fail, which will be a
long-term problem as we continue to support 0.2.9.

Allow getsockopt(…, SOL_SOCKET, SO_ACCEPTCONN, …) in sandbox

SO_ACCEPTCONN checks whether socket listening is enabled and is
used ever since 9369152aae9527cc3764 has been merged.

Closes ticket #29150

Merge branch 'bug29122'

Fix intermittent failures of test_circuitpadding_wronghop().

We fix it by disabling the scheduling of actual padding.
Fixes #29122.

Merge branch 'maint-0.3.5'

correct bug number in 29042 changelog

Merge branch 'maint-0.3.5'

Merge branch 'bug29042_035' into maint-0.3.5

Merge remote-tracking branch 'tor-github/pr/653'

Merge branch 'maint-0.3.5'

Merge branch 'bug28979_035' into maint-0.3.5

Merge branch 'maint-0.3.3' into maint-0.3.4

Merge branch 'maint-0.2.9' into maint-0.3.3

Merge branch 'maint-0.3.5'

Merge branch 'maint-0.3.4' into maint-0.3.5

Fix the year for 0.3.4.10 and 0.3.3.11

format_changelog: treat "issue NNNN" as a track ticket

Bump to 0.4.0.1-alpha-dev

Better failure message on stochastic test failure

Speed up the deterministic prng in test_prob_distr, by a lot.

Using a single xof object and squeezing it repeatedly should make
everything MUCH faster here.

Merge remote-tracking branch 'tor-github/pr/645'

lintChanges.py: Two python re usage fixes

Fix documentation for ClientAuth on HSv3.

The manpage erroneously said "privkey" when "public-key" would have
been correct.  Reported by "Felixix" as ticket 28979. Bugfix on
0.3.5.1-alpha.

Merge branch 'maint-0.3.5'

Add changes file for bug 28981

The fix was in commit 61636ad989de674698601284957dacde53cc4984.

Signed-off-by: Kris Katterjohn <katterjohn@gmail.com>

Update and fix a couple of comments in meminfo.c

This fixes a typo and also notes that HW_PHYSMEM64 is defined on
NetBSD (not just OpenBSD).

Signed-off-by: Kris Katterjohn <katterjohn@gmail.com>

Use HW_PHYSMEM instead of HW_USERMEM in get_total_system_memory_impl

The code checked for sysctl being available and HW_PHYSMEM being
defined, but HW_USERMEM was actually being used with sysctl instead
of HW_PHYSMEM.

The case for OpenBSD, etc. use HW_PHYSMEM64 (which is obviously a
64-bit variant of HW_PHYSMEM) and the case for OSX uses HW_MEMSIZE
(which appears to be a 64-bit variant of HW_PHYSMEM).

Signed-off-by: Kris Katterjohn <katterjohn@gmail.com>

Log more messages when failing to decode RSA keys

We log these messages at INFO level, except when we are reading a
private key from a file, in which case we log at WARN.

This fixes a regression from when we re-wrote our PEM code to be
generic between nss and openssl.

Fixes bug 29042, bugfix on 0.3.5.1-alpha.

Bump copyright date to 2019

Update copyright script for 2019

Merge branch 'maint-0.3.5'

Bump copyright date to 2019.

More line edits to changelog. Thanks, seborn!

Give the changelog an edit

Bump to 0.4.0.1-alpha

Start on 0.4.0.1-alpha changelog

Remove changes entries that appeared in 0.3.5.7

Remove fallback scripts and whitelist

They have been extracted to a new fallback-scripts.git repository.

Closes ticket 27914.

Merge remote-tracking branch 'mikeperry-github/bug29089'

Use [ -n "$x" ] in place of [ ! -z "$x" ] in chutney-git-bisect

Closes 29099.

Changes file for Ticket 28142.

Forward-port changelog and releasenotes entries from last Monday

Merge branch 'bug24953_squashed'

Depending on script mode, either use 'whitelist' or 'fallback list'

In updateFallbackDirs.py, say 'fallback list' instead of 'whitelist'

Merge branch 'ticket28058_squashed'

Add changes file

Add shellcheck to Travis CI builds

Run shellcheck for stuff in scripts/ as part of 'make check'

Merge remote-tracking branch 'asn-github/adaptive_padding-final'

Merge branch 'maint-0.3.5'

Rework rep_hist_log_link_protocol_counts()

Merge remote-tracking branch 'teor/bug29015'

Rename TYPE to TRANSPORT in PT STATUS messages.

See: https://bugs.torproject.org/28181

Remove TODO file.

All remaining tasks are now part of #28632.

Merge branch 'bug28989_squashed'

Fix a typo

Fix CID 1442277

Actually close the stdout pipe on error in process_unix_exec

When cleaning up after an error in process_unix_exec, the stdin
pipe was being double closed instead of closing both the stdin
and stdout pipes.  This occurred in two places.

Signed-off-by: Kris Katterjohn <katterjohn@gmail.com>

Merge branch 'maint-0.3.5'

Merge remote-tracking branch 'tor-github/pr/563' into maint-0.3.5

Include the beginnings of a FAQ about which timer to use.

Clarify immutability of global padding machine specs.