Fix a silly bug made by previous change: do not return a pointer address consumed.

SVN-Revision: 3435

archive_string_conversion_to_charset() should be used for an archive writer.

SVN-Revision: 3434

Canonicalize some charset-name so we can detect UTF-8, UTF-16BE and CP932 even if
those consist of lower alphabet characters or '-' omitted.

SVN-Revision: 3433

Fix issue 106. The original problem happned on linux platform and I fixed it onece
in r3277 but it was not sufficient. This change consider it could happen on other
platforms that the entry object has one sparse block and it indicates the whole file
data, which sparse block is made by other program code(not only our code).

SVN-Revision: 3432

First cut at RAR support, including RARv3.
This is currently rather limited.

SVN-Revision: 3427

Rename this test to match how other tests are named.

SVN-Revision: 3426

Issue 153: Test failures on platforms that lack full support for
the various format/filter options.

SVN-Revision: 3425

Extend the --newer-than test to verify the behavior when there's a new
file inside an old directory.  Rework the descent logic in write.c
somewhat to fix the behavior here.

SVN-Revision: 3424

Extend the MacOS compatibility test to verify that the attribute blob
starts with the expected bytes.
Fix the bug that this uncovered.

SVN-Revision: 3423

Extend the old test_compat_mac_gnutar to exercise compatibility with
both Apple's hacked GNU tar (<= 10.5) and Apple's hacked bsdtar (>= 10.6).

SVN-Revision: 3422

Fix counting files read, dot not count it up when returning ARCHIVE_EOF.
Add the check of the return value of archive_file_count() into several
format reader tests.

SVN-Revision: 3421

Fix a comment about the garbage bytes of CFDATA compressed by the deflate compression.

SVN-Revision: 3420

Fix typo: s/chekc sum/check sum/.

Submitted by: Ralph Corderoy (via Tarsnap)

SVN-Revision: 3418

Replace a pointer to an explanation which doesn't exist by the
explanation itself.

Submitted by: Ralph Corderoy, via Tarsnap
Explanation from: Tim Kientzle
Reviewed by: Tim Kientzle

SVN-Revision: 3414

Use CoreServices framework for Mac OS X in configure.ac, the same thing in CMakeLists.txt
has been already changed.

SVN-Revision: 3412

Remove unneeded code.

SVN-Revision: 3411

Do no use random data for the contents of ISO image; it cannot create
the same size of an ISO imaige every time when using zisofs option.

SVN-Revision: 3410

Fix warnings.

SVN-Revision: 3409

Fix comment and style. no functional change.

SVN-Revision: 3408

This is the final step to reduce use of both read() and write() system-calls in the iso9660 writer.
    - Stop reading the contents of each file from the temporary file with read().
    - Read the block of all file contents instead, and then write it to next stream.

SVN-Revision: 3407

Fix making a bootable iso image with zisofs option.

SVN-Revision: 3406

This is second step to reduce use of both read() and write() system-calls in the iso9660 writer.
  - Copy file contents to wbuff, 64K buffer, and then write wbuff data with write() syscall when
    the buffer is full.
  - Improve wbuff handling to be able to be used for zisofs accordingly.
  - Stop using wbuff as read buffer in setup_boot_information() function.

SVN-Revision: 3405

This is first step to reduce use of both read() and write() system-calls in the iso9660 writer.
  - Use only one temporary file to be simple structure.
  - When enabling zisofs, almost all files except a small(<2048 bytes) file are, consequently,
    always compressed even if it is a boot file. The boot file will be uncompressed later.
  - Write those files to the temporary file by 2048 bytes, though currently this is no effect.

SVN-Revision: 3404

Shift away "tar:utf8type=libarchive2x" option which is to read a pax file made with
libarchive 2.x in a wrong assumption of a wchar_t form in non UTF-8 locale;
use "tar:compat-2x" option instead.
And also add ""cpio:compat-2x" and "zip:compat-2x" to read filenames,
which are converted with CP_ACP, in those format on Windows plaform,
although you can use "hdrcharset=CP_ACP" option.

For posix like system:
  - use "tar:compat-2x" option when you get incorrect filenames from pax
    files made with bsdtar/libarchive 2.x.

For Windows system:
  - use "tar:compat-2x", "cpio:compat-2x" and "zip:compat-2x" options
    when you get incorrect filnames from those archives(except pax format)
    made with bsdtar/libarchive 2.x.

SVN-Revision: 3403

In the pax writer, do not get a filename dependent on current locale unless getting a filename in UTF-8 fails.

SVN-Revision: 3402

Try to use "SJIS" character-set if use of "CP932" failed and a best effort bit is on,
because all of implements of iconv do not support "CP932" character-set and
"SJIS" character-set is widely supported more than "CP932".

SVN-Revision: 3401

Clean up style; no functional change.

SVN-Revision: 3400

Rework enabling a operation to a wrong UTF-8 string made with Libarchive 2.x.

SVN-Revision: 3399

Set SCONV_WIN_CP flag so that we use Windows API for UTF-16BE conversion
because IsValidCodePage(CP_UTF16BE) fails but we can handle it with byte-swapping.

SVN-Revision: 3398

Properly handle SCONV_BEST_EFFORT flag when converting UTF-16BE.

SVN-Revision: 3397

Remove unneeded conversion code translation a string from a UTF-8 form to
the current locale because it will not happen without conversion errors.

SVN-Revision: 3396

Make sure plenty size to an output buffer for a replacement character in UTF-8.

SVN-Revision: 3395

Reduce duplicate code by merging strncat_from_utf16be and strncat_to_utf16be
into iconv_strncat_in_locale.

SVN-Revision: 3394

Improve string conversion functions:
 - Decide conversion functions when creating a string conversion object.

SVN-Revision: 3393

Clean up get_sconv_object() to avoid duplicate check and simplify its code.
No functional changes.

SVN-Revision: 3392

Some c compiler system provides wmemcpy as macro.

SVN-Revision: 3391

Unbreak build.

SVN-Revision: 3390

For Mac OS X, update comment in create_sconv_object(), and perform the normalization form C when
current locale is not UTF-8 because iconv would correctly handle filenames than those be in
UTF-8 NFD or UTF-16BE in NFD.

SVN-Revision: 3389

Rework archive_string_normalize_D() function.
 - improve ConvertFromUnicodeToText() handling.
 - correct a buffer size for NFD string.
 - return no changed data if the conversion fails.

SVN-Revision: 3388

Fix expanding output string buffer on Mac OS X.

SVN-Revision: 3387

Move failure() statement to right place.

SVN-Revision: 3386

Fix string conversion errors on Mac OS X.

SVN-Revision: 3385

Improve test_archive_string_conversion for export, a write side conversion process.

SVN-Revision: 3384

Remove unneeded assignment code found with Clang Static Analyzer.

SVN-Revision: 3383

Avoid warnings by Clang Static Analyzer.

SVN-Revision: 3382

Fix the result code of normalization.

SVN-Revision: 3381

Return a correct status when a entry has an incorrect linkname.

SVN-Revision: 3380

Avoid borland warnings at test_archive_string_conversion.c.

SVN-Revision: 3379

Use compress for test_archive_string_conversion.txt instead of gzip to work
a test test_archive_string_conversion on Windows platform, which does not
have zlib by default.

SVN-Revision: 3378

Combine strncat_from_utf16_to_utf8 and strncat_from_utf8_to_utf16 to make
a new function archive_string_append_unicode.

SVN-Revision: 3377

Issue 157:  Fix some unused-variable warnings from GCC 4.6.

SVN-Revision: 3376

Issue 157: Found by GCC 4.6:  The temp buffer, which was set up
specifically to avoid walking off the end of the provided input
data, wasn't being used.
Possible ramification:  libarchive could segfault when writing
shar files with uuencode encoding of file bodies, if the
data being read happened to end exactly at the end of
an allocated page.

SVN-Revision: 3375

Implement normalization to a UTF-16BE string recorded in ISO9660 Joliet extensions.

SVN-Revision: 3374

Eliminate a double check of remaining data.

SVN-Revision: 3373

Remove unneeded code that case will not happen because strncat_from_utf16_to_utf8 will be called instead.

SVN-Revision: 3372

Rework archive_strncat_in_locale mainly around UTF-16 handling to reduce duplicate code.

SVN-Revision: 3371

Avoid several warnings in libarchive_test on Borland C Compiler.

SVN-Revision: 3370

Fix a silly bug made by previous change.

SVN-Revision: 3369

Increase a buffer size for Joliet extension names up to 1024 bytes.
It is hard to calculate MBS length for limitation check.

SVN-Revision: 3368

Fix build failure in a strict check.

SVN-Revision: 3367

Set UTF-16BE filenames in Joliet extension to archvie_enty directly in a string conversion, and
report the conversion error if it happened.

SVN-Revision: 3366

Implement converting WCS from/to UTF-16BE on Windows, which code will be used
in ISO9660 reader and writer through archive_mstring.

SVN-Revision: 3365

Fix build failure on Visual Studio.

SVN-Revision: 3364

Fix warnings in libarchive/test_*.c on Borland C Compiler.

SVN-Revision: 3363

Comment out unneeded code in test_write_format_zip_no_compression.

SVN-Revision: 3362

Change a type of UTF-8 byte counter table to avoid warnings on Borland C Compiler.

SVN-Revision: 3361

Remove debug code for Mac OS.

SVN-Revision: 3360

Use NFD string for Mac OS at test_read_format_zip_filename.

SVN-Revision: 3359

Redefine SCONV_* flags used for archive_string_conv object.

SVN-Revision: 3358

It seems Mac OS cannot convert U+1109A, U+1109C and U+110AB to NFD although that is undocumented as far as I know.

SVN-Revision: 3357

Do not use WideCharToMultiByte and MultiByteToWideChar when current locale is "C" on Windows.

SVN-Revision: 3356

Properly free struct isofile object when some fatal error happened.

SVN-Revision: 3355

Reduce the effect of current locale for Joliet extension name(UTF-16BE) by direct generating it from archive_entry.

SVN-Revision: 3354

Fix counting UTF-16 characters and converting UTF-16 on Windows.

SVN-Revision: 3353

Use assertEqualUTF8String instead of assertEqualString at test_read_format_zip_filename_UTF8_UTF8.

SVN-Revision: 3352

Avoid warnings about no argument.

SVN-Revision: 3351

Avoid warnings in test_archive_read_open2.c about unused variables.

SVN-Revision: 3350

Avoid a warning in zip reader on Borland C Compiler.

SVN-Revision: 3349

Remove unneeded code in cab reader.

SVN-Revision: 3348

Move macros in archive_string.c to the top of the file.
Use macro for set byte sequence of U+FFFD for UTF-8.

SVN-Revision: 3347

Rework UTF-16 conversion functions.
 - rename strncpy_from_utf16be to strncat_from_utf16be and its feature is slightly changed as strcat.
 - rename strncpy_to_utf16be to strncat_to_utf16be and its feature is slightly changed as strcat.
 - use U+FFFD for invalid character if destination charset is UTF-8.
 - proper handle surrogate pair on Windows version.

SVN-Revision: 3346

Rework a handling of memory allocation failure in string conversion;
report the failure to the caller as much as we can instead of calling __archive_errx().

SVN-Revision: 3345

Fix segmentation fault on Mac OS.

SVN-Revision: 3344

Fix the warning Boarland C compiler complains of and some style.

SVN-Revision: 3343

Clean up the code Borland C compiler complains of at cab reader.

SVN-Revision: 3342

ctime and ctime_nanos are not used in set_times() on Windows.

SVN-Revision: 3341

Avoid some warnings on Borland C compiler.

SVN-Revision: 3340

Proper prototype for get_current_codepage and get_current_oemcp; Borland C compiler complains of this.

SVN-Revision: 3339

Fix the return code of archive_string_append_from_wcs_in_codepage().

SVN-Revision: 3338

Remove unused wmemcpy definition.

SVN-Revision: 3337

Use wmemcpy at archive_wstring_append().

SVN-Revision: 3336

Remove unneeded code in archive_write_set_format_cpio.c

SVN-Revision: 3335

Remove unneeded code in archive_write_set_format_cpio_newc.c

SVN-Revision: 3334

Use en_US.UTF-8 locale for tests instead of ru_RU.UTF-8 or ja_JP.UTF-8
since some platform do not install those locales by default.

SVN-Revision: 3333

Detect readlinkat() on linux by CMake; linux requires fcntl.h for AT_FDCWD.

SVN-Revision: 3332

Fix build failure.

SVN-Revision: 3331

Improve string conversion functions of UTF-16 about invalid characters.

SVN-Revision: 3330

Properly check if archive_string_ensure() succeeded or not.

SVN-Revision: 3329

Apparently, both input and output data type should be UTF-16 for ConvertFromUnicodeToText()
when converting NFC to NFD.

SVN-Revision: 3328

Avoid local conversion code in iso9660 writer.

SVN-Revision: 3327