Add missing #pragma once to File.hpp

Add -MQ to compilation flags to make dependency files work properly

Looks like ccache’s own header dependencies have been broken since
4aa357782e48 and nobody noticed.

(cherry picked from commit a00b59c86136488d54a83bef10bc5a0f6b37eacf)

Fix an out-of-bounds read when logging (#475)

The stack variable `suffix` is not guaranteed to be zero-terminated.

Recompress in parallel

Recompression is now done by a thread pool with one thread per logical
CPU. There is also a read-ahead to let the main thread do some directory
I/O while the CPUs are busy.

Add -X/--recompress option

Let cache entry writer/reader update/verify checksums

Make File movable and noncopyable

Rename file_size to file_size_on_disk and improve its return type

Refactor result/manifest reading/writing

* Converted compression code into C++ interfaces and implementations.
* Extracted code for reading/writing results/manifests into
  reader/writer classes.
* C++-ified result/manifest parsing code.

Add unit test of AtomicFile

Add AtomicFile::stream

Rename AtomicFile::close to commit

This better conveys the semantics.

Include .tmp. in AtomicFile names

This makes it possible to use AtomicFile for files in the cache
directory without having to add a “.tmp” interfix explicitly.

Add Util::big_endian_to_int and Util::int_to_big_endian

Add Util::get_file_size

Add std::make_unique implementation

Use UpperCamelCase instead of snake_case for namespaces

This makes Foo::bar work for both a namespace Foo and a class Foo.

Make AtomicFile::Type values lower case

Extract temporary file creation code into a function

Also, use cstdio instead of iostream since that will be needed in
upcoming commits to get hold on the underlying file descriptor.

Add and use Checksum class

The class wraps an XXH64 state.

Add and use CacheFile::Type and CacheFile::type

Move parse_int to util

Fix test suite problems on OS X

As suggested in PR #469.

Co-authored-by: Enrico Sorichetti <enricosorichetti@mac.com>

Force regeneration of autotools stuff in autogen.sh

As suggested in PR #469.

Co-authored-by: Enrico Sorichetti <enricosorichetti@mac.com>

Add .DS_Store to .gitignore

As suggested in PR #469.

Co-authored-by: Enrico Sorichetti <enricosorichetti@mac.com>

Make detection of supported Clang warning flags actually work

As suggested in PR #469.

Co-authored-by: Enrico Sorichetti <enricosorichetti@mac.com>

Add support for -MF=arg as understood by  EDG-based compilers

Closes #460.

(cherry picked from commit d5ff95277932936ed6b3dc1b674562a8682f8aef)

Only pass implicit -MQ to preprocessor if needed

This is a bug fix of 76a9959f3d3e.

(cherry picked from commit 19c3729d30640fc2c78242cb46136e619fdbd802)

Update NEWS

(cherry picked from commit 3c0e894c58b887bc40e2be99e722bd9b68df8689)

Simplify code

Extract function for free+nullify pattern

Dont free/null variable twice

Don’t crash if localtime returns null pointer in localtime_r replacement

This seems to happen in some unknown Windows environment, see #450.

Fixes #450.

(cherry picked from commit 8c4ffbab96a8f4bebc27b39ad3a235a5d8baeab3)

Include compiler-only arguments in the hash

After 5d8585b5 (#312), arguments that are not considered affecting the
preprocessor output won’t be passed to the preprocessor. -Werror and
-Wno-error are also not passed to the preprocessor so that options not
properly marked as “compiler only” will only trigger warnings, not
errors. This was a workaround for Clang complaining about unused
arguments in the preprocessor step performed by ccache.

However, it also introduced a regression: -Werror and the other options
were excluded from the hash as well. This means that

  cc -c file_with_warnings.c

would be cached by ccache, including the warning message. A later

  cc -Werror -c file_with_warnings.c

call would then be a cache hit, resulting in a compilation warning
instead of an error.

This commit fixes the problem by also including the compiler-only
arguments in the hash.

(cherry picked from commit 6be00a0070d3898fe7201f6db44a9a3c42627bf8)

Add configure check for Clang flags for disabling warnings

As suggested in #466.

Also, make --enable-more-warnings actually work when building from a
release archive.

Move dev mode configure check to the top

This makes it possible to make decisions depending on dev mode futher
down in configure.

Add configure macro AX_CHECK_COMPILE_FLAG

Remove obsolete configure check related to snprintf replacements

Clarify 3.7.4 news items

-gz is apparently supported by GCC 5+ and Clang as well.

Prepare for v3.7.4

(cherry picked from commit fbdb291fbf0fc749ed44fc510ff023c8030359ff)

Update NEWS

(cherry picked from commit d5697e4bcb04cf78245e30fbebdc4536d66c290a)

Support GCC 9’s -gz=[type] option

-gz[=type] neither disables nor enables generation of debug info, so
don’t enable the fallback behavior of hashing the current directory when
seeing -gz[=type] alone.

Closes #464.

(cherry picked from commit cb7a05a772ce3dcec58da16d957420f36cb97f75)

Update NEWS

Add missing include guard

Sort function definitions

Set sysconfdir to /etc when dist checking

This makes the command line stable so that we can get ccache hits.

Don’t fail on error when dist checking

libb2 can’t be built with -Werror.

Merge dist checks for using libzstd/libb2 from the Internet

Sort .gitignore

Don’t error out if a libzstd/libb2 Makefile doesn’t exist when cleaning

Add missing fmt headers to dist archive

Add progress bar for -x/--show-compression

Add progress bar for -c/--cleanup and -C/--clear

Constify file_size

Add util::for_each_level_1_subdir function

Add util::get_level_1_files function

Add ProgressBar class

The progress bar draws a simple progress bar with percentage to the
console.

Add util::ends_with

Fix include so that Cppcheck finds it

Remove no longer matched Cppcheck suppression

Fix Cppcheck warning about always false value

Make legacy_suites a constant

Remove left-over statement

Add util::create_dir, replacing create_parent_dirs and create_dir

Improve documentation of util::read_file/write_file

Add util::dir_name

Add util::base_name

Extract Catch2 main to a separate object file

This way the Catch2 object file (which takes a long time to compile)
won’t be invalidated each time ccache.hpp is updated.

C++-ify create_cachedir_tag

Don’t fail if CACHEDIR.TAG can’t be created

Logging is enough.

Replace third party hashtable with std::unordered_map

Fix code style

Ignore archives and directories for libb2 and libzstd (#459)

These are not required to be tracked under VCS.

Signed-off-by: Harsh Shandilya <msfjarvis@gmail.com>

configure: Update libzstd to 1.4.3 (#458)

Confirmed that all tests pass on Linux x86_64.

Signed-off-by: Harsh Shandilya <msfjarvis@gmail.com>

Win32: make_relative_path also accept /c/users (#455)

Patch copied from jd-gascuel@f3b85c9

doc: Add references to configuration items

doc: Add anchors to configuration items

doc: Mention that XXH64 is used for checksumming

doc: Remove note about hard links caveats from feature summary

I feel that the warning doesn’t quite belong to that list.

Prepare for v3.7.3

(cherry picked from commit fc69e8243743a2ed9305ff58c00e4fb23cb55237)

Update NEWS

Add missing include guard

Fix typo in NEWS

(cherry picked from commit 8c0a53c00f7d1d06aa4837d77f1dff23ae7c1150)

Don’t pass -Wno-error to the preprocessor

This is done to keep the argument order between -Werror and -Wno-error.

Fixes #451.

(cherry picked from commit 70986342c8948ac2ae974ee98efbcd6865003dc1)

Update news with a high-level summary of changes in 4.0 so far

Use std::min/std::max instead of MIN/MAX macros

Bump to CUDA 10.1.243 for Ubuntu 16.04

Fix “(readonly)” part of “ccache -s”

It was just a mistake in 800f8ed2edca0.

C++-ify configuration handling

- Instead of using code generated by gperf, use ordinary unordered maps
  for the mapping from config keys (and environment variables) to config
  items.
- Renamed “struct conf* conf” to “class Config g_config”.
- C++-ified conf.cpp and confitems.cpp into Config.cpp.

Clean up header includes

* All headers should have system.hpp as their first #include.
* Removed unnecessary stdbool.h inclusions.
* Use C++ variants of headers when possible.

Remove snprintf replacements

They clash with MinGW-w64 C++ headers, so let’s remove them. Any
reasonably modern system should have them.

Add some C++-ified utility functions

Rename test suite util to legacy_util

This makes room for the Catch2 test suite for util.cpp.

Remove autogenerated suites.hpp

The suites will slowly be converted to the Catch2 framework, so no need
to make it easy to add new legacy suites.

Add Catch2 2.9.1

Add AtomicFile class for updating a file with rename-in-place

Update next version to 4.0

I think that it makes sense to do a major version bump because of the
C++11 requirement and major changes like introduction of result files,
zstd compression and BLAKE2b hashing.

Bump to zstd 1.4.2

Add a subset of fmt 5.3.0

fmt is a “small, safe and fast formatting library”, see
<https://fmt.dev>.

Run clang-format on all code to follow the new code style

If you end up on this commit when running “git blame ...”, it’s probably
a good idea to use “git blame -w ...” to ignore whitespace changes.