Don't do expensive consensus stuff when not a cache.

This includes generating and storing compressed consensuses, and
consensus diffs.  Fixes bug 23275; bugfix on 0.3.1.1-alpha.

Merge branch 'bug23291_028' into maint-0.3.1

changes file for bug 23291

22839: fix check_heap_buffer buffer size in test-memwipe

whitespace fixes

Fix triggerable BUG() when decoding hsv3 descriptors.

Also improve the unittest to make sure it catches the right error.

Add unittest for #23233.

This will fail currently since the bug is not fixed yet.

Use a single free-and-exit strategy in config_process_include.

This avoids a double-free when a pointer already freed with
tor_free(config_line) is freed again in the cleanup-and-exit code.

Fixes bug 23155.

Merge branch 'bug23139' into maint-0.3.1

chages file on 22286

Remove some LCOV_EXCL stuff that I think may be testable after all.

This is partial revert on 22286.

Also, tweak some log messages to be distinct.

Merge remote-tracking branch 'ahf/bugs/22286' into maint-0.3.1

Fix a memory leak in consdiffmgr.c

Fixes bug 23139; bugfix on 0.3.1.1-alpha.

Merge branch 'maint-0.3.0' into maint-0.3.1

Merge remote-tracking branch 'dgoulet/bug23078_030_01' into maint-0.3.0

Merge branch 'bug23081_025' into maint-0.3.1

In ntmain, call set_main_thread() before running the loop.

Patch from Vort; fixes bug 23081; bugfix on fd992deeea76972 in
0.2.1.16-rc when set_main_thread() was introduced.

See the changes file for a list of all the symptoms this bug has
been causing when running Tor as a Windows Service.

Merge branch 'maint-0.2.5' into maint-0.2.8

Merge branch 'maint-0.2.9' into maint-0.3.0

Merge branch 'maint-0.3.0' into maint-0.3.1

Merge branch 'maint-0.2.8' into maint-0.2.9

Update geoip and geoip6 to the August 3 2017 database.

Merge branch 'bug23071_031' into maint-0.3.1

Make the hs_ntor_ref logic more correct when there is no sha3 module

Merge branch 'maint-0.3.0' into maint-0.3.1

"ours" merge to avoid version bump.

version bump to 0.3.0.10-dev

Merge branch 'maint-0.3.0' into maint-0.3.1

"Ours merge" to avoid version bump.

Bump to 0.3.0.10

hs: Cleanup logging statement in hs_intropoint.c

One log statement was a warning and has been forgotten. It is triggered for a
successful attempt at introducting from a client.

It has been reported here:
https://lists.torproject.org/pipermail/tor-relays/2017-August/012689.html

Three other log_warn() statement changed to protocol warning because they are
errors that basically can come from the network and thus triggered by anyone.

Fixes #23078.

Signed-off-by: David Goulet <dgoulet@torproject.org>

bump to 0.3.1.5-alpha-dev

Merge branch 'maint-0.2.9' into maint-0.3.0

Merge branch 'maint-0.3.0' into maint-0.3.1

Merge remote-tracking branch 'public/bug19769_19025_029' into maint-0.2.9

Merge branch 'maint-0.3.0' into maint-0.3.1

Merge branch 'maint-0.2.9' into maint-0.3.0

Merge remote-tracking branch 'public/bug20059_024_v2' into maint-0.2.9

Merge branch 'maint-0.3.0' into maint-0.3.1

Merge remote-tracking branch 'public/bug20270_029' into maint-0.3.0

Merge branch 'maint-0.3.0' into maint-0.3.1

Merge branch 'maint-0.2.9' into maint-0.3.0

Merge remote-tracking branch 'public/bug22245_024' into maint-0.2.9

Merge branch 'maint-0.3.0' into maint-0.3.1

Merge branch 'maint-0.2.9' into maint-0.3.0

Merge remote-tracking branch 'public/bug18100_029' into maint-0.2.9

Merge branch 'maint-0.3.0' into maint-0.3.1

Merge branch 'maint-0.2.9' into maint-0.3.0

Merge branch 'maint-0.2.7-redux' into maint-0.2.8

Merge branch 'maint-0.2.8' into maint-0.2.9

Merge branch 'maint-0.2.6' into maint-0.2.7-redux

Merge branch 'maint-0.2.5' into maint-0.2.6

Merge branch 'maint-0.2.4' into maint-0.2.5

Merge remote-tracking branch 'karsten/geoip-jul2017' into maint-0.2.4

Fix the hs_ntor integration tests to work with the pysha3 module

The sha3 module should still work.  Fixes bug 23071; bugfix on
0.3.1.1-alpha.

Bump to 0.3.1.5-alpha

Fix an unreachable memory leak in the unit tests

This is CID 1415726.

Merge branch 'bug23053_029' into maint-0.3.1

Fix a small memory leak when parsing unix: ports twice

Fixes bug 23053; CID 1415725.

Try to work around a compile warning in workqueue.c

Merge branch 'multi-priority_squashed' into maint-0.3.1

Fix the cpuworker.c documentation to mention all the kinds of work

Note that threadpool_queue_work...() can't actually return NULL

Always start with one additional worker thread

Now that half the threads are permissive and half are strict, we
need to make sure we have at least two threads, so that we'll
have at least one of each kind.

Queue consensus diffs at LOW priority.

Fixes bug 22883.

Fix a pair of stale comments in workqueue.c

These comments said that each thread had a separate queue, but we
haven't been using that design for some while.

Make the chance for priority inversion thread-specific

Instead of choosing a lower-priority job with a 1/37 chance, have
the chance be 1/37 for half the threads, and 1/2147483647 for the
other half.  This way if there are very slow jobs of low priority,
they shouldn't be able to grab all the threads when there is better
work to do.

Add support for multi-priority workqueues

Each piece of queued work now has an associated priority value; each
priority goes on a separate queue.

With probability (N-1)/N, the workers will take work from the highest
priority nonempty queue.  Otherwise, they'll look for work in a
queue of lower priority.  This behavior is meant to prevent
starvation for lower-priority tasks.

Merge branch 'maint-0.3.0' into maint-0.3.1

Merge branch 'maint-0.2.9' into maint-0.3.0

Merge remote-tracking branch 'public/bug20247_029' into maint-0.2.9

Merge branch 'maint-0.3.0' into maint-0.3.1

Merge branch 'maint-0.2.9' into maint-0.3.0

Merge branch 'maint-0.2.7-redux' into maint-0.2.8

Merge branch 'maint-0.2.6' into maint-0.2.7-redux

Merge branch 'maint-0.2.5' into maint-0.2.6

Merge branch 'maint-0.2.4' into maint-0.2.5

Merge branch 'maint-0.2.8' into maint-0.2.9

Point travis to #tor-ci, not #tor-bots

Merge remote-tracking branch 'isis/bug22636_0.3.1_squashed' into maint-0.3.1

Merge branch 'maint-0.3.0' into maint-0.3.1

This is an "ours" merge to avoid taking any changs from maint-0.3.0:
we don't want to take the travis file, since there is a separate branch
for putting it in 0.3.1 and later.

Merge branch 'maint-0.2.9' into maint-0.3.0

Travis update: "gcc-warnings" became "fatal-warnings" in 0.2.9

Merge branch 'maint-0.2.8' into maint-0.2.9

Merge branch 'maint-0.2.7-redux' into maint-0.2.8

Merge branch 'maint-0.2.6' into maint-0.2.7-redux

Merge branch 'maint-0.2.5' into maint-0.2.6

Merge branch 'maint-0.2.4' into maint-0.2.5

Merge branch 'maint-0.3.0' into maint-0.3.1

Merge branch 'maint-0.2.9' into maint-0.3.0

Merge branch 'bug23030_029_v2' into maint-0.2.9

Fix build warnings from Coverity related to our BUG macro

In the Linux kernel, the BUG() macro causes an instant panic.  Our
BUG() macro is different, however: it generates a nonfatal assertion
failure, and is usable as an expression.

Additionally, this patch tells util_bug.h to make all assertion
failures into fatal conditions when we're building with a static
analysis tool, so that the analysis tool can look for instances
where they're reachable.

Fixes bug 23030.

Merge branch 'bug22927_031' into maint-0.3.1

Merge branch 'maint-0.2.9' into maint-0.3.0

Merge branch 'maint-0.3.0' into maint-0.3.1

Merge branch 'bug22915_029_2' into maint-0.2.9

Suppress clang4-specific -Wdouble-promotion warnings

Wow, it sure seems like some compilers can't implement isnan() and
friends in a way that pleases themselves!

Fixes bug 22915. Bug trigged by 0.2.8.1-alpha and later; caused by
clang 4.

In < 0.2.9.x, --enable-fatal-warnings was --enable-gcc-warnings.

Builds on CI should use --enable-fragile-hardening.

(cherry picked from commit c91a57ccf90308c6728184b43519f96b61acb95d)

Only install Rust in CI if RUST_OPTIONS is set.

(cherry picked from commit e5dd07a4c64fd2a4132ab1f6dec64640a95da35e)

Install optional dependencies during Travis CI builds.

(cherry picked from commit 1bb00fb812c0df7a574ed62e9f53b0e8192c7d04)

Fix CI homebrew checks for outdated packages.

(cherry picked from commit 8f8689f70235dc19cbc5092ea148af5772a9cdc3)