Check for memory allocation errors in archive_entry_xattr_add_entry

Sponsored by: Tarsnap Backup Inc.

Issue 675: SIGRTMAX can be non-constant, so allocate the signal tracking array at runtime

Merge branch 'master' of github.com:libarchive/libarchive

Merge pull request #617 from chenxiaolong/ifdef-statvfs-usage

Avoid statvfs/fstatvfs calls on systems where it is not available

Merge pull request #663 from vapier/master

add missing _PC_NAME_MAX checks

Merge pull request #672 from ericvw/nsig_sigrtmax

Replace usage of _NSIG with SIGRTMAX

Merge pull request #655 from flandr/fully-sparse

Support efficient creation of fully-sparse files

Replace usage of _NSIG with SIGRTMAX

POSIX specification defines SIGRTMAX.  _NSIG is not defined on all
platforms (e.g, AIX).

Signed-off-by: Eric N. Vander Weele <ericvw@gmail.com>

Update MSDOS file attribute test

Issue 422:  Add archive_xxx_version() calls so tests can more accurately query libarchive support

Rework some of the Zip, Cab, and LZ4 tests to use these
to determine what behavior they should expect.

Merge pull request #668 from dosomder/android-compile

Add api level check for android config

Add api level check for android config

Some features are only included since api level 21

Merge pull request #666 from dosomder/android-compile

Fix compiling for android

Add ST_MTIME_NSEC case to archive_entry_copy_stat

Android uses st_mtime_nsec

Fix android intmax compiler warnings

add missing _PC_NAME_MAX checks

This file looks for _PC_NAME_MAX in a few places, but not all.
Add some ifdefs in setup_current_filesystem too.

Merge pull request #645 from andrewgregory/check_symlinks

fix check_symlinks

Add more sample zip files to the fuzz test

add test for SECURE_SYMLINKS with absolute path

Skip root directory symlink check

The first time check_symlinks is called on an absolute path it will use
the entry pathname directly, blanking the leading slash.  This leads to
calling lstat on an empty string, which returns ENOENT, terminating the
loop early and falsely marking the path as safe.

add test for SECURE_SYMLINKS for first child

Restore modified path after lstat

check_symlinks is intended to check each component of a path, but failed
to restore the stripped trailing components after each iteration,
leaving a NUL byte in the middle of the path.

Fix for issue #623.

Apparently, people have come to expect that the following
is sufficient to get bit-for-bit identical output from tar:
   * Same filenames
   * Same contents
   * Same uid, gid
   * Same mtime (forced via "touch -t <timestamp>")
   * Sorting entries

Bsdtar's "restricted pax" format violated this by including
ctime, atime, and birthtime (which are not updated by
'touch -t).  So we should only emit those additional time
values in the full pax format.

People who are really serious about generating bit-for-bit
identical archives should really build their own command-line
interface: You can still use libarchive to build the output,
but your custom CLI could sort the entries and strip everything
except a bare minimum of basic metadata.

Clarify the limit on number of filters

Fix globbing error

Support fully-sparse files

Avoids an edge condition where fully-sparse files would not trigger
sparse file handling, leading to large tar files full of zeros.

Fix -c test:  we forced uid/gid to 1000, so we should not compare against the current user

Fix stringification here

Merge branch 'master' of github.com:libarchive/libarchive

Issue #377: Help cpio tests pass on systems with large UIDs

Merge pull request #630 from bjacke/vv-verbose-write

Vv verbose mode for write write

Comment fileno() usage

Merge pull request #670 from dosomder/665-android-lf-support

Add large file support for android

Merge pull request #669 from dosomder/639-lz4-update

Update LZ4 support to track 1.7 API changes.

Merge pull request #673 from ericvw/dynamic_compile_flags

Dynamically determine supported compiler flags during configure

Dynamically determine supported compiler flags during configure

Some compilers (e.g., `xlc` on AIX) don't support GCC compiler flags.
This change dynamically tests for supported `COMMON_FLAGS`, which get
appended to `CFLAGS`.

Signed-off-by: Eric N. Vander Weele <ericvw@gmail.com>

Add large file support for android

Android doesn't support the macro _FILE_OFFSET_BITS=64 however it does
support a few file64 functions

Fix lz4 compression_level check

Match this check with the rest of the file where HC is level 3 and up

Use LZ4_loadDict

dict was saved but never loaded. Gave a minor compression improvement
with a 8868100 bytes test file and compression-level 1

Use updated lz4 compression functions

A few functions in the lz4 library are deprecated, some are obsolete.

Make LZ4 HC optional

Use LZ4_decompress_safe_usingDict for reading

This function was added on May 4, 2014

https://github.com/Cyan4973/lz4/blob/7bcb3b2e9f36ad6adef2cb43858a8f3adb39c527/lz4.h

The old function LZ4_decompress_safe_withPrefix64k is deprecated since
April 11, 2015

https://github.com/Cyan4973/lz4/blob/973e385fa332485f4617cf16406a8c8ef631a555/lib/lz4.h

Update NEWS with highlights from last two years of work

Minor adjustments to DEBUG messages

Issue #659:  Fix xar parsing of archives with appleextended ACLs

The parser treated the <appleextended> tag as both known and
unknown, leaving the parser in a state that prevented it
from reading any further attributes.  Depending on the
order of attributes, this could result in a file with no
name, for instance.

Make assertions explicit in sparse tests

Instead of trying to special-case sparse data vs dense data detection
in verify_sparse_file (by resetting the `data_blocks` if no holes are
found), make the expected number of data blocks an explicit parameter.

Simplifies a subsequently introduced test case; no functional changes.

add vv option details in bsdtar man page

bsdtar: add support for "vv" verbose style when writing archives

bsdtar: also print preceding "x" when extracting in vv mode

bsdtar: move list_item_verbose() into common util.c

Fix sparse tests with holes at the end

Sparse file creation in test_sparse_basic failed to create holes at
the end of files. These tests don't presently verify the existence of
holes at the end (they are concerned only with the sparse data block
entries), but this change ensures that the input file matches the
expected hole/data layout.

Merge pull request #650 from cinience/master

Update the remaining calls to __archive_write_program_allocate to include the new parameter.

Fix bug for __archive_write_program_allocate

Fix bug for __archive_write_program_allocate

Set version number to 3.1.900a

Read very large RAR headers incrementally

Formerly, libarchive tried to read the entire header into
memory at once, which created problems for malformed RAR
files with 4GB header sizes.  This was causing occasional
crashes of the test suite on memory-limited systems.

Rework LZ4 option tests to work with various implementations of posix_spawnp

Update lz4 test to watch for the reworded error messages

Improve error messages by including the name of the external program being used

Bring along a trailing null when guessing the path to the program under test

Clarify error messages when using external compression programs

Fix LZ4 tests when liblz4 is not present

Track changes in the lz4 command-line tool

Really sync up the test harnesses

Fix two broken UU files

Sync up the test harnesses; add error checks to the UUdecode utility

Fix test on systems without zlib

Update the version string correctly

Fix cmake tests for nettle and OpenSSL support

Merge branch 'master' of github.com:libarchive/libarchive

Fix nettle library probe

 = Only use it if we can find the library *and* the headers
 = When probing the library, try to link a function that's
   actually in the library (not 'main')

Merge pull request #644 from hinrichsenhans/vs2015

Visual Studio 2015 Changes

Visual Studio 2015 Changes

snprintf shouldn't be defined in a macro in VS2015 and above due to its C99 changes

Include missing reference files for tests

Include overlooked header file in distro

Remove Zip UTF8 tests from build

Remove Zip UTF8 tests from master.

Ongoing work on Zip UTF8 support is occurring in the 'utf8' branch.

Mention V7, a few wording tweaks

Remove an extraneous .El

Document the 'v7' tar format support.

Merge pull request #638 from hinrichsenhans/test_leading_slash_fix

Test leading slash fix

Merge pull request #641 from watercrossing/fixShadowTime

Fix `time` shadowing in archive_write_set_format_warc.c

Fix `time` shadowing in archive_write_set_format_warc.c

test_leading_slash compatibility with Windows

Add '.exe' to the binary name to ensure the text matching works

Merge pull request #634 from scfarley/master

Apply global flag in substitution

Apply global flag in substitution

Add loop to move through a path name looking for additional matches if
the global flag is provided for a substitution.  The loop breaks when no
more matches are found for the rule.  Previously, the global flag would
end up advancing to the next rule instead of searching farther into the
path for another match.

Merge pull request #607 from betafive/pbarker/issue578

Issue 578: Close temp_fd in 7zip and xar writers

Issue #631:  Move 'r' into an inner scope to fix shadowing

Merge pull request #1 from libarchive/master

Updating with current libarchive development

Merge pull request #628 from obache/neatsrc/issue-627

Ensure to declare UINTMAX_MAX, INTMAX_MAX and INTMAX_MIN

Ensure to declare UINTMAX_MAX, INTMAX_MAX and INTMAX_MIN

Fix typo

Add in two missing test cases.

Rework to avoid some C99-isms.  <sigh>

Avoid statvfs/fstatvfs calls on systems where it is not available

Use CommonCrypto APIs on OS X only when available

Use each CommonCrypto API only when using an OS X SDK version new enough
to provide it.

Do not use pthread.h API without header

Define O_CLOEXEC when missing in archive_random.c

We do this several other sources already.

Forward declare __archive_get_date in a dedicated internal header

Avoid repeating the signature declaration in every source that uses it.
While at it, constify internal __archive_get_date implementation to
keep signatures consistent.

Use macros for ZIP format integer constants

Define ZIP_4GB_MAX and ZIP_4GB_MAX_UNCOMPRESSED macros to hold the "LL"
integer literals.  This improves readability and improves portability of
the integer literals.