Upgrade Travis-CI environment to Ubuntu 18.04

Fix variable name

Add missing TestContext instantiation

Mention inode cache in NEWS

Improve inode_cache test suite to not truncate CCACHE_LOGFILE

Fix some trivial code style issues

Add inode cache for file hashes (#577)

The inode cache is a process shared cache that maps from device, inode,
size, mtime and ctime to saved hash results. The cache is stored
persistently in a single file that is mapped into shared memory by
running processes, allowing computed hash values to be reused both
within and between builds.

The chosen technical solution works for Linux and might work on other POSIX
platforms, but is not meant to be supported on non-POSIX platforms
such as Windows.

Use 'ccache -o inode_cache=true/false' to activate/deactivate the cache.

Only try to hard link object files to/from the cache

The compiler unlinks the destination object file before writing, but it
apparently doesn’t do that for dependency files. This means that
compilation can corrupt a .d file that shares i-node with a cached .d
file when using the hard link mode. Here is a scenario where this can
happen:

1. There is a test.c which includes test.h.
2. When test.c is compiled, the compiler writes test.d which mentions
   test.h and ccache hard links test.d into cache entry 1. test.d and
   cache entry 1's .d file now share i-nodes.
3. The include of test.h is removed from test.c.
4. When test.c is compiled again the compiler overwrites test.d with new
   content without test.h and ccache hard links test.d into cache entry
   2. test.d, cache entry 1 and cache entry 2 now share i-nodes, all of
   which contain the new content without test.h.

Since we can’t be sure how the compiler behaves for other types of files
(.dwo, .cov, etc.), only try to to hard link object files.

Fixes #599.

(cherry picked from commit 443afc179e1de3f050850103a5ba62e3cb5ab398)

Add missing O_TRUNC in copy_file and clone_file

Move ThreadPool methods to .cpp file

Clean up profiling_clang test suite probing

Handle incapability of determining home directory more gracefully

Convert last usage of putenv

Remove comments with motivation for “clang-format off/on”

The motivation is available in the Git history.

Fix capitalization of Clang

Use STDERR_FILENO/STDOUT_FILENO constants

Clean up

Handle all Intel “-xCODE” compiler options correctly

“CODE” in the Intel compiler’s “-xCODE” option for specifying processor
features seems to always start with an uppercase letter, and since GCC’s
language specifications always are lowercase we can just treat uppercase
codes as an ordinary compiler argument.

Improve temp file handling

- Use Util::create_temp_fd instead of legacy create_tmp_fd.
- Use Context::register_pending_tmp_file instead of unlinking
  explicitly.
- Simplified output of merged stderr from preprocessor and compiler.

Add test case for merging stderr from preprocessor and compiler

Use std::ios_base::openmode as the third Util::write_file parameter

Refactor signal handling and process exit code

* Added a SignalHandler class which encapsulates parts related to signal
  handling.
* Moved data referenced by the exit functions to Context (compiler PID,
  pending temporary files and pending debug log files).
* Let the Context destructor do what the exitfn functionality used to
  do.
* Removed the now superfluous exitfn functionality.

C++-ify unlink wrapper functions

x_unlink(p)   == 0 -> Util::unlink_safe(p)
x_try_unlink  == 0 -> Util::unlink_safe(p, Util::UnlinkLog::ignore_failure)
tmp_unlink(p) == 0 -> Util::unlink_tmp(p)

Revert "Merge catch2_tests into unittest’s main"

This reverts commit 4608eb6d6c41aefb7c5f534166901e051e126115.

Since unittest/main.cpp includes src/Util.hpp it’s still too painful to
compile the Catch2 runner, so let’s keep it separate.

Use raw string literals for version and usage texts

Default to zstd compression level 1

After some experiments my evaluation is that the increased compression
ratio of level 1 is worth the very slight decrease in compression speed.

Add and use win32_error_message function

Remove overengineered win32 gethostname fallback code

Let’s assume that all systems we reasonably support have access to
gethostname. If not, revisit later.

Regarding the win32 case: Since the replacement code (triggered if
HAVE_GETHOSTNAME isn’t defined) itself uses gethostname, just use
gethostname.

Add unit test for config key tables consistency

Refactor away temp_dir()

Extract internal tracing stuff to a separate file

Remove unit test comments that are hard to keep up to date

Remove now obsolete unittest utils

Convert create_file usage to Util::write_file

Merge catch2_tests into unittest’s main

The Catch2 runner was previously compiled separately since it’s slow to
compile, but after the removal of the old test framework there should be
little reason to modify unittest/main.cpp often.

C++-ify argprocessing test suite

Remove last traces of the old unittest framework

Add TestContext to test cases that create local files

Implement TestUtil::TestContext

Implement Util::wipe_path

Use Util::traverse in Util::clean_up_internal_tempdir

Use Util::traverse in Util::get_level_1_files

Implement Util::traverse

Use using instead of typedef

Convert legacy_util test suite to Catch2

Convert hashutil test suite to Catch2

Convert hash test suite to Catch2

Convert compopt test suite to Catch2

Convert argument_processing test suite to Catch2

Remove obsolete ScopeGuard

Upgrade string-view-lite to 1.4.0

Guess compiler using substring search again

Regression in 30c10e8791bd02a8a3b13beeda875adbefa8c7ab.

Remove now obsolete from_cstr function

C++-ify get_result_name_from_cpp

Speed up check-syntax rule

Fix typo in manifest_get log message

Support clang options for compiling with sampled profiles (#589)

Add support for -fprofile-sample-use and -fprofile-sample-accurate.

Remove legacy args API

Remove last usage of legacy args->argv wrapper

Remove last usage of legacy args_strip function

Remove last usage of legacy args_set function

Remove last usage of legacy args_remove_first function

Remove last usage of legacy args_pop function

Remove last usage of legacy args_init_from_string function

Remove last usage of legacy args_init_from_gcc_atfile function

Remove last usage of legacy args_init function

Remove last usage of legacy args_extend function

Remove last usage of legacy args_add_prefix function

Remove last usage of legacy args_add function

C++-ify process_args

Extract code for handling dependency environment variables to a function

C++-ify final parts of process_arg

C++-ify language functions

C++-ify parts of process_arg

C++-ify compopt functions somewhat

Remove obsolete CHECK_DOUBLE_EQ macro

Remove obsolete path_exists function

Handle Intel compiler option “-xHost” correctly

Fixes #587.

Use args[i] consistently to refer to the argument in process_arg

A shorter alias is nice but breaks symmetry when code needs to process
args[i + 1], etc.

C++-ify -optf/--options-file processing in process_arg

This also makes the implementation acually work with multiple option
files delimited by commas.

C++-ify parts of process_arg

Improve Args::from_gcc_atfile

Scanning for the null character from the string is more efficient.

Simplify detect_pch

C++-ify detect_pch

C++-ify ArgumentProcessingState members

Improve ordering of ArgumentProcessingState members

C++-ify ArgsInfo::debug_prefix_maps

C++-ify ArgsInfo::arch_args

C++-ify ArgsInfo::sanitize_blacklists

Extract argument processing code to a separate file

Fix build error with --enable-tracing

Extract make_relative_path to Util

Don’t regenerate version.cpp on every build

This fixes a problem where version.o will always be out-of-date, thus
triggering a rebuild and relink (regression in 827237fd).

Add Args::empty method

Let process_args use orig_args from ctx

Don't depend on how echo interprets backslash escapes (#588)

The escape sequence '\n' should be translated to a new line character
when printed to version.cpp. Default mode might be implementation
dependent. At least in Fedora /usr/bin/echo defaults to -E. On the
other hand older versions might not support the -e option that enables
backslash escapes where it is not default.

Split the command into two, one for each output line, which should
produce same output on all platforms.

Fix variable shadowing after d0eb89de

Improve handling of profiling options

Handling of -fprofile-{generate,use}[=path] was implemented in PR #2
(2011). ccache has since then gained support for Clang, which is not
GCC-compatible for -fprofile-{generate,use}[=path]. Furthermore, GCC 9
changed the semantics of -fprofile-{generate,use}=path, making it
incompatible with ccache’s original implementation.

One crucial problem with the implementation is that there is no error
handling when the expected profiling data file cannot be found. This
means that there will be false positives cache hits for Clang and GCC
9+.

Fix this by:

* Checking for different profiling data file locations to handle
  different compilers and versions.
* Bailing out if no profiling data file can be found.

Also:

* Implemented support for Clang’s -fprofile-instr-{generate,use}[=path]
  options.
* Implemented support for -fauto-profile[=path].
* Removed the conversion of absolute path to the profile directory.
  91a2954e says that the directory is rewritten to increase the hit
  rate, but I don’t understand how that could be the case.
* Added tests for the profiling options. Exception:
  -fauto-profile[=path], since that would require running the perf tool.

Fixes #582.

(cherry picked from commit c9fdcef576dd13a2ea2355bcd866b5c561cb1562)

Whitelist clang-tidy warning cppcoreguidelines-pro-type-const-cast

We’re using const_cast for the argument argv to execve(2) which doesn’t
modify the argument.

Don’t construct std::string from nullptr

As suggested by clang-tidy.