Libarchive 3.3.2

Add a missing test file

Issue #910:  Don't use stdin as a source of test data

Fix use-after-free in error branch. From Ngie Cooper.

Remove fallback tree in LZX decoder.

The LZX decoder flattens the Huffman tree into a table, but wanted to
limit it to 1k elements to reduce L1 pressure. Since the logic for
filling was flawed and performance argument points more to a bad index
logic, remove the tree logic.

Reported-By: OSS-Fuzz issue 497

Fix build on ancient systems without int64_t definition.

Refactor numeric parsing routines into a single version without UB.

Reported-By: OSS-Fuzz issue 862

Tighten mode check: '8' and '9' don't make good octal digits.

Be consistent about the types of internal and external link counts.

Reported-By: OSS-Fuzz issue 577

Don't leak memory.

Change little endian read routines to compute in unsigned math.

Shifting a negative value is UB in ISO C.

Avoid signed overflow by computing in uintmax_t and casting the result.

Avoid memcpy of zero length, the source can be NULL.

Don't check unaligned access in ubsan for GCC.

Avoid shifting negative numbers by doing endian manipulation unsignedly.

Avoid memcpy if length is zero, the source can be NULL in this case.

Optimize string processing.

Explicitly free pass_destpath after processing.

Free linkresolver after processing.

Redo 1e660621b4b00eaf4ef7a508aedf52c5a421bd2e, only skip the memmove.

Reshuffle conditions to ensure path is initialised and NULL handled.

Short cut zero size to avoid notnull attribute for mmemove in glibc.

Reported-By: OSS-Fuzz issue 497

Rewrite expressions to avoid undefined behavior.

Reported-By: OSS-Fuzz issue 527

Add missing .Nm to the NAME section. (#906)

Issue #901: Sparse files with long name get renamed.

The original ustar header has a 100 character limit for the file name.
With the POSIX interchange format, an additional header attribute
contains the full path and libarchive tries to cut it to something
sensible. The GNU sparse file extension on the other hand also likes to
mangle the ustar header field to include a marker and contains yet
another attribute for the original path. If the name was truncated
earlier, this attribute would get the incorrect truncated name.

Complay with the spirit, if not the letter of the GNU sparse file rule.

Merge pull request #902 from mingzym/libressl

fix building with libressl

fix building with libressl

patch from Gentoo Bug 614460, credit to hexumg@gmail.com.

Merge pull request #897 from phillipberndt/master

Add test for #870 / #869

dirfd can be implemented as macro, so use a better test case.

Shrink array for days per month. Saves 31 Bytes on AMD64.

Plug memory leaks in xattr and acl tests.
Detected with libasan on Linux.

Update date in archive_read_disk.3 and archive_write_disk.3

Add manpage entry for archive_read_disk_set_behavior().
Update and alphabetically sort options in archive_write_disk_set_options().

Add test for #870

Report names of extended attributes that could not be restored
Remove xattr namespace limitations for AIX and Darwin
On Linux, skip all known ACL extended attributes and obsolete xfsroot

Encapsulate archive_disk_acl.* in an ARCHIVE_ACL_* ifdef
This allows debugging and compilation with defines outside of configure.

Fix copyright in archive_disk_acl_linux.c

Fix compilation on FreeBSD without NFSv4 ACL support

Unify platform ACL code in single files.
Declare map constants static for better optimization.

Merge pull request #892 from vapier/master

do not make DaysInMonth static

do not make DaysInMonth static

Since the Feb month is written to based on arguments to this function,
it makes it not safe to use simultaneously.  Drop the static markings.

Merge pull request #891 from vapier/master

constify variables more

constify variables more

A bunch of constant variables/tables are missing const markings.
Adding them allows moving more data to the read only sections, and
ends up shrinking writable data a bit by 1k on x86_64/Linux.  Not
much, but still nice.

Support UF_HIDDEN file flag (FreeBSD and Darwin)

Improve extended attribute support

Mac OS X changes:
  - add support for extended file attributes via sys/xattr.h
  - when extracting an archive entry that has mac_metadata and
    mac_metadata is requested to be extracted, extended attributes
    are restored only from mac_metadata.
  - by default, extended attributes are stored both in mac_metadata and
    SCHILY.xattr/LIBARCHIVE.xattr. This is subject to review and change.

To match behavior on other platforms, store extended attributes on
FreeBSD with extattr_set_link() if no fd is provided.

Detection of extended attributes support in configure stage has been
rewritten.

Added xattr platform test to libarchive and xattrs option test to bsdtar.

tar: fix conditionals and add richacl support to test_option_acls

Update config_freebsd.h to match FreeBSD version

Always include extern keyword for ACL map constants

Sync documentation of archive_read_open_memory with reality.

Merge pull request #887 from codarrenvelvindron/master

Discard 3072 bytes instead of 1024 bytes [Operation C.R]

As per Cryptographic Requirements published on Wikileaks on March 2017.

We discard more bytes of the first keystream
to reduce the possibility of non-random bytes.

Similar to:
freebsd/freebsd@9395fdf

Deduplicate working path code in archive_read_disk_entry_from_file

Do not treat archive_read_disk_entry_setup_acls() as static

Add NFSv4 ACL support for Linux via librichacl

Richacls are interpreted as NFSv4 ACLs and stored in archive_acl (Richacl
flags and masks are not stored). Analog to mac_metadata, NFSv4 ACLs do not
get extracted when the extraction of extended attributes is enabled and the
"trusted.richacl" extended attribute is present.

RichACL masks and are calculated from file mode on extraction.

mac_metadata acl check has been moved in the code to be together with the
richacl check.

Move platform-specific ACL code to individual source files.

This makes the code much more readable and eases the addition of new
ACL implementatons in the future.

Additional changes:
- most of ACL detection is now done at configure stage
- configuration now reports what ACL was detected
- NFSv4 ACL tests now test INHERIT_ONLY and NO_PROPAGATE_INHERIT

Merge pull request #870 from phillipberndt/master

Seekable zip backend: Accept files with valid ZIP64 EOCD headers

Merge pull request #841 from JPeterMugaas/cng_enable

Changes to configure.ac from MSYS2 Pacman project for mingw-w64.  Thi…

Merge pull request #867 from praiskup/cpio-getgrgid

bsdcpio: show numeric uid/gid when names are not found

Break out the library version functions into a separate source file.

This breaks a static dependency on libbz2.  Before this,
any use of libarchive that ended up linking archive_util.c would
require libbz2.  (And since archive_util.c contains a bunch of
very core functions, this is pretty much everybody.)
Now you only require libbz2 if you request library version information
or actually use some other feature that involves bzip2 support.

Note that most of the libraries provide version information via
compile-time macros -- libbz2 only provides such information via
a function call, which is why this issue only arises with libbz2.
In particular, the libbz2 version reports the version that we
are currently linked against; the other library versions report
the version we were compiled with (which may not be the same as
what we are currently using).

OSS-Fuzz Issue 806: integer overflow in mtree_atol10

Rework the mtree_atol10 integer parser so it can parse
INT64_MIN without overflowing the intermediate value.

While here, make this function behave a little more predictably for
too-large input: It now always advances the pointer to the first
non-digit character.

Darwin ACL: fix legacy support in tar/test_option_acls.c
Remove ACL_FLAG_DEFER_INHERIT and ACL_FLAG_NO_INHERIT

Darwin ACL: avoid unnecessary use of getpwuuid() and getgruuid()

Darwin ACL: avoid using mbr_identifier_to_uuid()
Use mbr_uid_to_uuid() and mbr_gid_to_uuid() for backwards compatibility
instead. These functions have been introduced together with membership.h.

Fixes #882

The "size" pax header keyword overrides tar header's size field.

Fixes #880

Merge branch 'master' of https://github.com/libarchive/libarchive into cng_enable

Merge pull request #879 from jwilk/spelling

Fix typos

tar: test_option_fflags adjustments
  - Clear fflags on created directories
  - FreeBSD ZFS workaround - ZFS sets uarch on all touched files

Solaris: use aclp instead of acl to not shadow global acl()

New tar test: test_option_acls
Add sunacl_get() and setTestAcl() to common test code
Test for membership.h on Mac OS X and make it a requirement for ACLs

Reorganize ACL defines and fix detection of ACL_SYNCHRONIZE on Mac OS
Adjust MacOS part of test_acl_platform_nfs4

Change Solaris ACL support to use acl() and facl()

This removes dependency on libsec and enables compilation on Solaris 10.

Fix typos

Fix compilation on Mac OS X versions without ACL_SYNCHRONIZE

Compare full file flags in test_option_fflags

Missing commas

Fix markup

Fix markup

Move documentation from archive_write_disk(3) into individual man pages.

Drop documentation for functions with their own man page.

Drop trailing comma.

Fix typos.

test_main: compact canNodump() source code a bit

mdoc should not contain empty lines.

Mark function that doesn't return as dead.

Add format function annotation.

Mark functions that don't return as dead.

Be more friendly to format string checkers.

Use ctype macros with unsigned char arguments.

Mark functions that don't return as dead.

bsdtar tests: add test_option_fflags

bsdtar manpage: be more precise what -p and --no-same-permissions does

Use types consistent with the prototypes in the header.

After the 3.3.1 release, bump the version to 3.3.2dev and go back to debug building.

Libarchive 3.3.1

CMake builds now default to "Release" in releases

seekable zip backend: Accept files with valid ZIP64 EOCD headers

Previously, a ZIP64 file needed to have a valid classic EOCD header.
This is not the case at least for archives generated by PHPZipStreamer.

This commit allows for a bit more than necessary: While PHPZipStreamer
sets the classic EOCD header to all -1's, the bidding function now
succeeds also if the EOCD header values have arbitrary values, as long
as the ZIP64 EOCD header seems plausible. This simplifies the logic and
should not do any harm in practice.

This fixes #869.

First round of fixing autotools build on MSYS2-MINGW

WARC reader: avoid use of isblank()

Fixes #874

Merge pull request #875 from tpgxyz/master

fix liblzma.h detect