Reduce duplicate code by merging strncat_from_utf16be and strncat_to_utf16be
into iconv_strncat_in_locale.

SVN-Revision: 3394

Improve string conversion functions:
 - Decide conversion functions when creating a string conversion object.

SVN-Revision: 3393

Clean up get_sconv_object() to avoid duplicate check and simplify its code.
No functional changes.

SVN-Revision: 3392

Some c compiler system provides wmemcpy as macro.

SVN-Revision: 3391

Unbreak build.

SVN-Revision: 3390

For Mac OS X, update comment in create_sconv_object(), and perform the normalization form C when
current locale is not UTF-8 because iconv would correctly handle filenames than those be in
UTF-8 NFD or UTF-16BE in NFD.

SVN-Revision: 3389

Rework archive_string_normalize_D() function.
 - improve ConvertFromUnicodeToText() handling.
 - correct a buffer size for NFD string.
 - return no changed data if the conversion fails.

SVN-Revision: 3388

Fix expanding output string buffer on Mac OS X.

SVN-Revision: 3387

Move failure() statement to right place.

SVN-Revision: 3386

Fix string conversion errors on Mac OS X.

SVN-Revision: 3385

Improve test_archive_string_conversion for export, a write side conversion process.

SVN-Revision: 3384

Remove unneeded assignment code found with Clang Static Analyzer.

SVN-Revision: 3383

Avoid warnings by Clang Static Analyzer.

SVN-Revision: 3382

Fix the result code of normalization.

SVN-Revision: 3381

Return a correct status when a entry has an incorrect linkname.

SVN-Revision: 3380

Avoid borland warnings at test_archive_string_conversion.c.

SVN-Revision: 3379

Use compress for test_archive_string_conversion.txt instead of gzip to work
a test test_archive_string_conversion on Windows platform, which does not
have zlib by default.

SVN-Revision: 3378

Combine strncat_from_utf16_to_utf8 and strncat_from_utf8_to_utf16 to make
a new function archive_string_append_unicode.

SVN-Revision: 3377

Issue 157:  Fix some unused-variable warnings from GCC 4.6.

SVN-Revision: 3376

Issue 157: Found by GCC 4.6:  The temp buffer, which was set up
specifically to avoid walking off the end of the provided input
data, wasn't being used.
Possible ramification:  libarchive could segfault when writing
shar files with uuencode encoding of file bodies, if the
data being read happened to end exactly at the end of
an allocated page.

SVN-Revision: 3375

Implement normalization to a UTF-16BE string recorded in ISO9660 Joliet extensions.

SVN-Revision: 3374

Eliminate a double check of remaining data.

SVN-Revision: 3373

Remove unneeded code that case will not happen because strncat_from_utf16_to_utf8 will be called instead.

SVN-Revision: 3372

Rework archive_strncat_in_locale mainly around UTF-16 handling to reduce duplicate code.

SVN-Revision: 3371

Avoid several warnings in libarchive_test on Borland C Compiler.

SVN-Revision: 3370

Fix a silly bug made by previous change.

SVN-Revision: 3369

Increase a buffer size for Joliet extension names up to 1024 bytes.
It is hard to calculate MBS length for limitation check.

SVN-Revision: 3368

Fix build failure in a strict check.

SVN-Revision: 3367

Set UTF-16BE filenames in Joliet extension to archvie_enty directly in a string conversion, and
report the conversion error if it happened.

SVN-Revision: 3366

Implement converting WCS from/to UTF-16BE on Windows, which code will be used
in ISO9660 reader and writer through archive_mstring.

SVN-Revision: 3365

Fix build failure on Visual Studio.

SVN-Revision: 3364

Fix warnings in libarchive/test_*.c on Borland C Compiler.

SVN-Revision: 3363

Comment out unneeded code in test_write_format_zip_no_compression.

SVN-Revision: 3362

Change a type of UTF-8 byte counter table to avoid warnings on Borland C Compiler.

SVN-Revision: 3361

Remove debug code for Mac OS.

SVN-Revision: 3360

Use NFD string for Mac OS at test_read_format_zip_filename.

SVN-Revision: 3359

Redefine SCONV_* flags used for archive_string_conv object.

SVN-Revision: 3358

It seems Mac OS cannot convert U+1109A, U+1109C and U+110AB to NFD although that is undocumented as far as I know.

SVN-Revision: 3357

Do not use WideCharToMultiByte and MultiByteToWideChar when current locale is "C" on Windows.

SVN-Revision: 3356

Properly free struct isofile object when some fatal error happened.

SVN-Revision: 3355

Reduce the effect of current locale for Joliet extension name(UTF-16BE) by direct generating it from archive_entry.

SVN-Revision: 3354

Fix counting UTF-16 characters and converting UTF-16 on Windows.

SVN-Revision: 3353

Use assertEqualUTF8String instead of assertEqualString at test_read_format_zip_filename_UTF8_UTF8.

SVN-Revision: 3352

Avoid warnings about no argument.

SVN-Revision: 3351

Avoid warnings in test_archive_read_open2.c about unused variables.

SVN-Revision: 3350

Avoid a warning in zip reader on Borland C Compiler.

SVN-Revision: 3349

Remove unneeded code in cab reader.

SVN-Revision: 3348

Move macros in archive_string.c to the top of the file.
Use macro for set byte sequence of U+FFFD for UTF-8.

SVN-Revision: 3347

Rework UTF-16 conversion functions.
 - rename strncpy_from_utf16be to strncat_from_utf16be and its feature is slightly changed as strcat.
 - rename strncpy_to_utf16be to strncat_to_utf16be and its feature is slightly changed as strcat.
 - use U+FFFD for invalid character if destination charset is UTF-8.
 - proper handle surrogate pair on Windows version.

SVN-Revision: 3346

Rework a handling of memory allocation failure in string conversion;
report the failure to the caller as much as we can instead of calling __archive_errx().

SVN-Revision: 3345

Fix segmentation fault on Mac OS.

SVN-Revision: 3344

Fix the warning Boarland C compiler complains of and some style.

SVN-Revision: 3343

Clean up the code Borland C compiler complains of at cab reader.

SVN-Revision: 3342

ctime and ctime_nanos are not used in set_times() on Windows.

SVN-Revision: 3341

Avoid some warnings on Borland C compiler.

SVN-Revision: 3340

Proper prototype for get_current_codepage and get_current_oemcp; Borland C compiler complains of this.

SVN-Revision: 3339

Fix the return code of archive_string_append_from_wcs_in_codepage().

SVN-Revision: 3338

Remove unused wmemcpy definition.

SVN-Revision: 3337

Use wmemcpy at archive_wstring_append().

SVN-Revision: 3336

Remove unneeded code in archive_write_set_format_cpio.c

SVN-Revision: 3335

Remove unneeded code in archive_write_set_format_cpio_newc.c

SVN-Revision: 3334

Use en_US.UTF-8 locale for tests instead of ru_RU.UTF-8 or ja_JP.UTF-8
since some platform do not install those locales by default.

SVN-Revision: 3333

Detect readlinkat() on linux by CMake; linux requires fcntl.h for AT_FDCWD.

SVN-Revision: 3332

Fix build failure.

SVN-Revision: 3331

Improve string conversion functions of UTF-16 about invalid characters.

SVN-Revision: 3330

Properly check if archive_string_ensure() succeeded or not.

SVN-Revision: 3329

Apparently, both input and output data type should be UTF-16 for ConvertFromUnicodeToText()
when converting NFC to NFD.

SVN-Revision: 3328

Avoid local conversion code in iso9660 writer.

SVN-Revision: 3327

Fix a name of timezone global variable for Borland.

SVN-Revision: 3326

Clean up best_effort_strncat_in_locale().
 - merge is_all_ascii_code() and best_effort_strncat_to_utf8() into best_effort_strncat_in_locale().
 - assign '?' character if a character code > 127.
 - update comment.

SVN-Revision: 3325

Do not set error status when a struct archive object is NULL.

SVN-Revision: 3324

Fix wrong calculation of converted bytes and return code on character replacement.

SVN-Revision: 3323

The source data type for ConvertFromUnicodeToText() should be UniChar, UTF-16
so we have to do pre-conversion that translates a UTF-8 string to UTF-16's
before calling ConvertFromUnicodeToText() and pass that UTF-16 string.

SVN-Revision: 3322

Improve MBS<=>WCS functions.
 - split archive_wstring_append_from_mbs into mbsnrtowcs version and mbrtowc/mbtowc version.
 - POSIX version of archive_string_append_from_wcs behavior simulates Windows version's.
   That is to continue conversion even if there is illegal WC.
 - set the terminator '\0' to destination buffer even if conversion failed.

SVN-Revision: 3320

Use archive_mstring_*_l interface in archive_acl_* functions
since archive_mstring knows how to treat UTF-8 characters and
what way is efficient on the platform and what way reduces or
avoid dependence on current locale.

SVN-Revision: 3319

Add temporary debug code for Mac OS to check status at CDash.

SVN-Revision: 3318

On Mac OS, compare NFD string instead of NFC string
at test_read_format_zip_filename and test_read_format_cab_filename.

SVN-Revision: 3317

Use assertEqualMem instead of assert(0 == memcmp(xxx....)).

SVN-Revision: 3316

Improve the check that FS_IOC_FIEMAP operation is supported on the filesystem.

SVN-Revision: 3315

If FS_IOC_FIEMAP operation fails by EOPNOTSUPP, the operation is not supported.

SVN-Revision: 3314

Assign U+FFFD(Replacement Character) for unknown character in UTF-8
even if the platform has no conversion function.

SVN-Revision: 3313

Increase robustness for an empty filename or an invalid filename on Windows,
which cannot be completely converted from WCS to MBS.
Correctly detect invalid UTF-8 string on Windows.

SVN-Revision: 3312

Use archive_entry_*_l functions at zip format writer.

SVN-Revision: 3311

Use archive_entry_*_l functions at xar format writer.

SVN-Revision: 3310

Use archive_entry_*_l functions at pax format writer.

SVN-Revision: 3309

Use archive_entry_*_l functions at ustar format writer.

SVN-Revision: 3308

Use archive_entry_*_l functions at gnutar format writer.

SVN-Revision: 3307

Use archive_entry_*_l functions at cpio newc format writer.

SVN-Revision: 3306

Use archive_entry_*_l functions at cpio format writer.

SVN-Revision: 3305

Use archive_entry_copy_*_l functions at zip format reader.

SVN-Revision: 3304

Use archive_entry_copy_*_l functions at xar format reader.

SVN-Revision: 3303

Use archive_entry_copy_*_l functions at tar format reader.

SVN-Revision: 3302

Use archive_entry_copy_*_l functions at lha format reader.

SVN-Revision: 3301

Use archive_entry_copy_*_l functions at cpio format reader.

SVN-Revision: 3300

Use archive_entry_copy_*_l functions at cab format reader.

SVN-Revision: 3299

Correct winioctl to winioctl.h in configure.ac.
Fix comment about winioctl.h in build/cmake/config.h.in.

SVN-Revision: 3298

In configure, SSIZE_MAX requires limits.h

SVN-Revision: 3297

Correct macro names in CMakeLists.txt.
  HAVE_ACL_LIB ==> HAVE_LIBACL
  HAVE_ATTR_LIB ==> HAVE_LIBATTR

SVN-Revision: 3296

Specify -fno-builtin to gcc during detecting functions because use of
-Werror on CMake prevent the detection of built-in functions of gcc by
compiling failure which is conflicting types for built-in function.

SVN-Revision: 3295

Detect readdir_r with cmake on linux.

SVN-Revision: 3294