Add compatibility with old #defines

Do not use private macros for special types

When you need to write a callback for archive_read_open2, you must provide a
function which has the same signature as the typedef. The documentation says
that the read callback returns a ssize_t, but on windows there is no such
ssize_t. libarchive falls back on another type and use the private macro
__LA_SSIZE_T, thus it is not possible to write portable code that use
read_open2.

This patch replaces that macro with a simple typedef la_ssize_t (and does the
same for la_int64_t).

Merge branch 'master' of github.com:libarchive/libarchive

Test harness should use 'const' buffer here

Spelling

Merge pull request #555 from orex/master

archive_write_set_format_filter_by_ext: man pages updated.

BSD format in manual.

archive_write_set_format_filter_by_ext: man pages updated.

Merge pull request #106 from orex/corrected

Corrected

Merge pull request #544 from pombreda/patch-1

Fixed minor typo

Fixed minor typo

Issue #543:  Start building out some tests for MSDOS attributes

Merge pull request #536 from pombredanne/patch-1

Fixing path to UC Regents-copyrighted file.

Merge pull request #537 from pombredanne/patch-2

Updating references to tar/matching.c and get_date.c

Issue #523: Fail if entry is too small for encryption header.

Issue #539:  Try a different way to compute max/min time_t values.

Issue #540: Fix test to avoid use-after-free error.

Merge branch 'master' of github.com:libarchive/libarchive

Fix spelling of archive_read_data_into_fd

Updating references to tar/matching.c and get_date

tar/matching.c is no a longer a file in the codebase. It has been replaced by libarchive/archive_match.c which is different code.

tar/get_date.c is now libarchive archive_getdate.c

Fixing path to UC Regents-copyrighted file.

The path pointed to a file whose name has changed.

Small cosmetic changes.

Github Issue #529:  mismatched const usage in archive_read_open_memory.c

Merge branch 'master' of github.com:libarchive/libarchive

Merge pull request #102 from sergiud/master

Fix for VC compilation errors

Merge pull request #534 from rossburton/master

Fix out of tree builds

Merge pull request #531 from hinrichsenhans/master

Fixes for VS2012 Compile

Fix printing of special chars in strdump

build: fix out of tree builds

When writing files with shell directly it's best to create the target
directory first, as it's possible that the build directory is almost empty.

In particular out of tree builds with automake's dependency tracking
disabled is an easy way of triggering this.

Fixes for VS2012 Compile

Updated includes in bsdtar_windows.h to bring in _setmode and _O_BINARY via io.h and fcntl.h
Explicitly cast a few void * to their structs to suppress Intellisense warnings
Moved variable in read_archive - VS2012 needs variables declared at the top of the block (does not support C99)

Extend Zip64 test to verify more of the format details

Fixes for VS2012 Compile

Fixes for VS2012 Compile

Added headers needed when compiling in Win32 without Cygwin
Some pointers needed to be explicitly cast
VS had a lot of trouble with storing the result of
archive_entry_pathname in a local variable
The only way I could get it to compile was to call the function twice

Use a macro wrapper on LL literals for compatibility with certain old Windows compilers.

Merge branch 'master' of github.com:libarchive/libarchive

Fix a missing asterisk in the sample code.

More wording changes

Expand CONTRIBUTING

Fix markdown typos

Merge branch 'master' of github.com:libarchive/libarchive

Add a CONTRIBUTING file.  Github shows a link to this in the Issues tracker.

Test support for UTF8 pathname extension in Zip archives

Merge pull request #108 from maksqwe/zip_encryption

Fix check for ZIP_ENTRY_FLAG_ENCRYPTED

Update iconv.m4

Reword this warning message.

Nudge the Zip64 cutoff a little higher.

A simple test (feeding /dev/random through gzip) suggests
that deflate will only expand the data by 0.03% in the worst case.
So allow a 0.4% margin instead of the 6.25% I had here earlier.

Github Issue #522: Detect cycles in the ISO directory tree

Issue #522: Dir loop in malformed ISO causes segfault

Github Issue #522 revealed that we could blow the stack
when recursing to assemble ISO paths.  I saw this happen
at 130,000 dir levels.  This patch addresses this by limiting
the directory recursion to 1,000 elements.

TODO:  It would be even better to track and detect the dir loop
directly.

Select Zip64 extensions a little more aggressively.

 * Compressed files close to 4GiB (in case compression makes file larger)

 * Include encryption overhead when checking whether file is too big.

 * Clarify comments

Suggested by a conversation on info-zip-dev mailing list.

Merge pull request #112 from ngladitz/gnutar-large-id

Fall back to base-256 encoding for UID/GID like GNU tar does.

README: Update issue tracker link to refer to GitHub issues

Also mention this in the NEWS file.

INSTALL: Update Wiki link to refer to GitHub wiki

Fall back to base-256 encoding for UID/GID like GNU tar does.

fixed another compilation error

Merge pull request #111 from andreasstieger/xattr

Fix a subtle wrong library check that caused libarchive to depend on lib...

Fix a subtle wrong library check that caused libarchive to depend on libattr when it should be using glibc.

If lzma_cputhreads() is unavailable, default the number of threads to 1.

Merge pull request #101 from chenxiaolong/install

Allow library installation to be disabled in CMake

Merge pull request #107 from rpaulo/master

libarchive: use lzma_stream_encoder_mt() if it's available.

Merge pull request #110 from ghedo/traversal

Fix directory traversal in bsdcpio

Add ARCHIVE_EXTRACT_SECURE_NOABSOLUTEPATHS option

This fixes a directory traversal in the cpio tool.

Issue 270:  Correct spelling of 'archive_write_header'

Split out the compiler flags to make it easier to adjust locally.

Read_open_memory does not alter the data passed to it, so should accept const void * arguments

Issue 410: Segfault on invalid rar archive

Libarchive's API passes a void ** which is set by the format
to the address of the entry data that was just read.

In one particular case, the RAR decompression logic uses a
non-NULL value here to indicate that the internal 128k decompression
buffer has been filled.  But the RAR code took no steps to ensure
that the value was set NULL on entry.  As a result, a crafted RAR
file can trick libarchive into returning to the caller a 128k block
of data starting at whatever value was previously in the caller's
variable.

The fix is simply to set *buff = NULL on entry to the RAR
decompression logic.

Merge branch 'master' of github.com:libarchive/libarchive

Conflicts:
libarchive/archive_read_support_format_zip.c

Remove mentions of a required signature.  This was added
by libarchive but never caught on with other mtree implementations.

Issue 408: Fix escaped newline parsing

Issue 407: Tar reader tries to examine last character of an empty filename

Of interest:  While working on this, I noted that we have
an existing test for tar files with empty filenames.
That test asserts that the correct behavior here is for the
format handler to return the entry with the empty filename
and a status of ARCHIVE_OK.  Clients need to be robust against
empty filenames.

Issue 412: Use uint64_t throughout for file sizes

Issue 412: Be more careful about symlink length before trying to read it

Issue 412: Visual Studio 2008 does not support C99

xz: add the xz:threads option.

It's now possible to chose the number of threads used by the lzma
multi-threaded compressor using tar ... --xz --option xz:threads=N where
N is the number of threads.  When N is 0, it will create threads based
on the number of CPUs (following the xz(1) model).

CMakeLists.txt: Make libxml2 and expat optional

Issue 409: archive_read_extract object leaked

Register the cleanup function for the object at the point
where the object is actually allocated to ensure that
it always gets cleaned up.

Fix check for ZIP_ENTRY_FLAG_ENCRYPTED

"zip->entry_flags | ZIP_ENTRY_FLAG_ENCRYPTED" is always true.

libarchive: use lzma_stream_encoder_mt() if it's available.

This is the multi-threaded stream encoder version of lzma that brings
significant speed improvements.  libarchive is using all the available
threads when lzma_stream_encoder_mt() is present.

New functionality added for automatically choose write file format and filter by filename.

Warning of unsed function "aes_ctr_encrypt_counter" were fixed.

Issue 405: segfault on malformed 7z archive

Reject a couple of nonsensical cases.

Issue 406: Segfault on malformed Zip archive

Issue here was reading a size field as a signed number
and then using that as an offset.  Fixed by correctly
masking the size value to an unsigned result.

Includes test based on the archive provided in the issue report.

A correct fix for Issue 404: Read past end of string parsing fflags

The previous fix actually broke the fflag parsing.  We
cannot use strcmp() here because we're comparing a null-terminated
string to a part of another string.

This fix explicitly tracks the various string lengths and
checks that they match before calling memcmp() or wmemcmp().
That avoids any buffer overrun without breaking the parser.

Issue 402: Failed to recognize empty dir name in lha/lzh file

When parsing a directory name, we checked for the name
length being zero, but not for the first byte being a
null byte.  Add a similar check for the file case.

Correct the spelling of 'wcscmp'.

Issue 404: Read past end of string parsing fflags

Issue 403: Buffer underflow parsing 'ar' header

While pruning trailing text from ar filenames, we did not
check for an empty filename.  This results in reading the byte
before the filename on the stack.

While here, change a number of ar format issues from WARN to FATAL.
It's better to abort on a damaged file than risk reading garbage.
No doubt, this will require additional tuning in the future.

Issue 400: Crash reading malformed compress (.Z) input

The KwKwK case can never validly appear as the first token
after a reset.

Thanks to the afl-gcc folks for finding this.

Issue 398: Overlapping memcpy

Some of the pathname edits parse a part of the pathname
in the entry, then try to set the pathname from that part.
This leads the text routines to memcpy() from within the
string buffer.

Avoid this by simply using memmove() for low-level string append
operations.

Issues 396, 397: Ignore entries with empty filenames.

Bugs in the rar and cab readers lead to returning entries
with empty filenames.  Make bsdtar resistant to this.

Of course, we should also fix the rar and cab
readers to handle these cases correctly and either
return correctly-populated entries or fail cleanly.

Set a proper error message if we hit end-of-file when
trying to read a cpio header.

Suggested by Issue #395, although the actual problem there
seems to have been the same as Issue #394.

Merge pull request #104 from snarkmaster/improve_skips

Do not request 0-length skips; sanity-check return.

Do not request 0-length skips; sanity-check return.

I noticed that my skip callback was always being invoked with a request of
0.  This is a bit wasteful since skip callbacks commonly involve a syscall
like lseek().

Also, it seems good to error out when the skip callback is buggy, and claims
to skip more than requested.

Test Plan:

```
autoreconf -ivf && ./configure && make && make check
```

The same tests fail as before, with the same error messages. If interested,
both failure logs are here:

https://github.com/snarkmaster/libarchive/commit/00c9751cde6cc888fb844b7a1fcc0f82dbaaedb1

These are on Ubuntu 14.04.

Add a check to archive_read_filter_consume to reject any
attempts to move the file pointer by a negative amount.

Note:  Either this or commit 3865cf2 provides a fix for
Issue 394.

Issue 394: Segfault when reading malformed old-style cpio archives

Root cause here was an implicit cast that resulted in
reading very large file sizes as negative numbers.

Extend the fuzz test to fuzz more bytes in small files;
add the sample cpio_bin_le file to the test.

Duplicate the cpio_bin_be test to build a basic cpio_bin_le test.

Merge pull request #103 from sevan/patch-1

Update tar.5

Update tar.5

Joerg Shilling's star is CDDL with some components in GPL (autoconf files) (see COPYING file in star source archive)

A couple of stray files that should be cleaned by the clean script.

Missing .El at end of list.

Skip the --lz4 test if libarchive was compiled without the library
and this platform does not have an lz4 executable.

It seems there should be a better way to handle this.... <sigh>