c: Fix empty string literal handling

Problem reported by Bernhard Voelker in:
<http://lists.gnu.org/archive/html/bug-gnulib/2014-07/msg00059.html>.
* x-c.c (phase5_get): Add missing memory allocation for empty
string literal.

intl: Sync up loadmsgcat.c with glibc

* loadmsgcat.c [_LIBC]: Define PRI_MACROS_BROKEN unconditionally.

intl: Sync up loadmsgcat.c with glibc

* loadmsgcat.c: Include assert.h.
(_nl_load_domain): Add semicolon to end of line.
(_nl_load_domain)[HAVE_MMAP]: Use MAP_FAILED and assert that
it is (void *) -1.
(_nl_load_domain)[_LIBC]: Call __libc_rwlock_init instead of
gl_rwlock_init.
(_nl_unload_domain): Cast convd->encoding to non-const.

intl: Add back ChangeLog to gettext-runtime distribution

* Makefile.in (DISTFILES.gettext): Add ChangeLog.

tests: Test "make dist" in autopoint test

* autopoint-3: Run "make dist" after "make"; add a workaround for
a bug in 0.19 and 0.19.1, where intl/ChangeLog is required but
missing in the archive.

intl: Stop installing ChangeLog.inst

After the git-version-gen migration (commit fbf4e276), the
creation of gettext-tools/intl/ChangeLog.inst in configure.ac was
removed because we lost access to $RELEASE_DATE.  Given that
intl/VERSION provides enough information, simply drop the
ChangeLog file.
Problem reported by Bruce Korb in
<https://lists.gnu.org/archive/html/bug-gettext/2014-06/msg00022.html>.
* Makefile.in (install-data): Don't install ChangeLog.inst.
(distclean): Don't remove ChangeLog.inst.
(uninstall): Don't remove ChangeLog under $(gettextsrcdir)/intl.
(dist): Don't include ChangeLog in the distribution.

doc: Update licenses from GNU

* gpl.texi, lgpl.texi, fdl.texi: Update from GNU.
* gettext.texi (GNU GPL, GNU LGPL, GNU LGPL): Define nodes here,
instead of in those license documents.

Release 0.19.1

Prepare for 0.19.1

maint: Mention updating autopoint tests in Admin/release-steps

Temporarily add Language: field to all PO file headers

Due to a bug in 0.19, the Language: field is considered mandatory.
This was fixed in commit 31744906, but better avoid error when
building with 0.19 at the moment.  This should be overwritten with the
next translations update.

maint: Mention how to update translations from Translation Project

Update translations from Translation Project

msgmerge: Disable --color option in --update mode

Suggested by 林Ｖ字龍 at:
<https://lists.gnu.org/archive/html/bug-gettext/2014-06/msg00017.html>.
* msgmerge.c (main): Error out when --color and --update are
specified at the same time.

xgettext: Fix misrecognition of character literals in C and Vala

Problem reported by Paul Eggert at
<http://lists.gnu.org/archive/html/bug-gettext/2014-06/msg00015.html>.
* x-c.c (phase5_get): Make sure to skip contents of character constant.
* x-vala.c (phase3_get): Likewise.

doc: Update the matrix

* matrix.texi: Update.
* nls.texi (STATUS): Likewise.

maint: Mention xz-compressed tarball in Admin/release-steps

autogen.sh: Use xz-compressed archive tarball

* autogen.sh: Fetch archive.dir-latest.tar.xz instead of .tar.gz.

configure: also distribute xz-compressed tarballs

* configure.ac (AM_INIT_AUTOMAKE): Add dist-xz, so that xz-compressed
.tar.xz tarballs will be distributed alongside .tar.gz ones.

tests: Prevent autopoint tests from creating temp files in /tmp

tests: Remove debug code from msgattrib-19

examples: Don't require msgfmt when compiling hello-c-gnome3

* hello-c-gnome3/Makefile.am (CLEANFILES): Clean hello.desktop.
(EXTRA_DIST): Add hello.desktop.in.
(MAINTAINERCLEANFILES): Add hello.desktop.in.
(hello.desktop): Move msgfmt invocation to...
(hello.desktop.in): ...here.

NEWS: Mention 0.19.1 changes

maint: Mention how to use the included gettext-tools to regeneate files

desktop: Use logical filename as msgid location

* read-desktop.c (desktop_parse): Pass logical filename instead of
real filename to desktop_reader_handle_pair.

desktop: Read LINGUAS file even if LINGUAS envvar is set

* msgfmt.c (get_languages): If the LINGUAS envvar is set, use it
to restrict the languages list read from the LINGUAS file, not to
extend the list.
(add_languages): Take an optional DESIRED_LANGUAGES argument.

tests: Ignore the LINGUAS envvar in msgfmt-desktop-2

Reported by Lars Wendler at:
<http://lists.gnu.org/archive/html/bug-gettext/2014-06/msg00002.html>.
* msgfmt-desktop-2: Unset the LINGUAS envvar.

Fix the last commit

build: Handle 'environ' global variable differently on cygwin x86_64

Amendment to commit c97dafde.
* tests/test-environ.c.diff: New file.
* Makefile.am (EXTRA_DIST): Add new patch.

vala: Don't elide comments while parsing string literal

* x-vala.c (phase3_get): Use phase1_getc to read characters inside
a string literal.

msgl-check: Treat missing header errors as warnings

Problem reported by Richard Hughes at
<https://lists.fedoraproject.org/pipermail/devel/2014-June/199539.html>.
After <https://savannah.gnu.org/bugs/?40262>, "msgfmt -c" reports
error on missing PO headers.  However, it turned out to be too strict
for the projects using Launchpad Translations.  Let's relax the check
for the moment and wait for one or two release cycles.
* gettext-tools/src/msgl-check.c (check_header_entry): Report missing
required headers as warning, instead of error.

po: Sync gettext-tools/po/Makevars with gettext-runtime/po/Makevars

* Makevars (PACKAGE_GNU, PO_DEPENDS_ON_POT)
(DIST_DEPENDS_ON_UPDATE_PO): New variables.
* Makevars.template (PACKAGE_GNU, PO_DEPENDS_ON_POT)
(DIST_DEPENDS_ON_UPDATE_PO): New variables.

Release 0.19

Regenerate files for 0.19

Prepare for 0.19.

build: Handle 'environ' global variable differently on cygwin x86_64

Problem reported by Vasyl Khalak in:
<https://cygwin.com/ml/cygwin/2013-06/msg00228.html>.
* lib/execute.c.diff: New file.
* lib/spawn-pipe.c.diff: Likewise.
* Makefile.am (EXTRA_DIST): Add new patches.

build: Fix make distcheck

* gettext-runtime/man/Makefile.am (EXTRA_DIST): Add $(man_HTML3) so not to
regenerate them on make distcheck.

doc: Update from ISO languages database

* ISO_639: Remove Moldavian. Update Bihari, Bengali, Catalan,
Church Slavic, Divehi, Dzongkha, Ewe, Greek, Spanish, Fijian,
Gaelic, Hebrew, Interlingua, Indonesian, Inupiak, Central Khmer,
Kirghiz, Luxembourgish, Limburgan, Lao, Latvian, Norwegian Bokmal,
North Ndebele, Dutch, Norwegian Nynorsk, South Ndebele, Occitan,
Oromo, Pushto, Rundi, Romanian, Sango, Swati, South Sotho, Tswana,
Tonga, Uighur, Volapuk, Yiddish, and Zhuang.

msgexec: Pass previous msgid to the child process

Suggested by Pavel Kharitonov in:
<http://lists.gnu.org/archive/html/bug-gettext/2014-05/msg00022.html>.
* msgexec.c (process_string): Set MSGEXEC_PREV_* envvar.

msgfilter: Pass previous msgid to the child process

Suggested by Pavel Kharitonov in:
<http://lists.gnu.org/archive/html/bug-gettext/2014-05/msg00022.html>.
* msgfilter.c (process_message): Set MSGFILTER_PREV_* envvar.

build: Fix VPATH build for po-gram-gen2.h

build: Simplify man and HTML documentation generation

Problem reported by Santiago Vila in:
<https://lists.gnu.org/archive/html/bug-gettext/2014-05/msg00024.html>.

NEWS: Mention msgexec/msgfilter plural handling

tests: Add test for msgfilter plural handling

tests: Add test for msgexec plural handling

msgexec, msgfilter: Fix typo in comments

Refere to the correct environment variables MSG{EXEC,FILTER}_MSGCTXT
and MSG{EXEC,FILTER}_MSGCTXT in comments.

Signed-off-by: Stanislav Brabec <sbrabec@suse.cz>

msgfilter: Implement plural support

* msgfilter.c (process_message): Set or unset
MSGFILTER_MSGID_PLURAL and MSGFILTER_PLURAL_FORM.

msgexec: Implement plural support

* msgexec.c (process_string): Set or unset MSGEXEC_MSGID_PLURAL.
(process_message): Set or unset MSGEXEC_PLURAL_FORM.

tests: Don't assume ga_IE locale is present

* msginit-3: Fix charset value after msginit invocation.

Fix typo in commit 2a644d7a

Remove non-existing regex.diff from distribution

Update after gnulib changed.

Update Gnulib

tests: Fix errors when CFLAGS contains --coverage

* lang-c: Supply $CFLAGS to the libtool link command.
* lang-objc: Likewise.

Update .gitignore

msgfmt: Report error on accelerator mismatch

* msgl-check.c (check_pair): Increment error count on missing
accelerator character or too many accelerators.

filter-quote: Minor refactoring of string copy

tests: Improve test coverage

build: Fallback $docdir to $datarootdir/doc/gettext

Problem reported by Santiago Vila in
<http://lists.gnu.org/archive/html/bug-gettext/2014-05/msg00014.html>.
* gettext-runtime/configure.ac: Adjust $docdir assuming that
AC_PACKAGE_TARNAME is set.
* gettext-tools/configure.ac: Likewise.
* gettext-tools/examples/configure.ac: Likewise.

tests: Adjust the error message check after commit 4aaaccd2

* msgfmt-10: Increment expected error count.

msgfmt: Accumulate errors when parsing the PO header

Problem reported by Peter Eisentraut at
<https://savannah.gnu.org/bugs/?40262>.
* msgl-check.c (check_header_entry): Return the number of errors.
(check_message): Check the return value of check_header_entry.

project-id: Add missing quotes around `pwd` for basename

Problem reported at <http://bugs.debian.org/654779>.
* project-id: Quote argument of the basename command.

po: Set PACKAGE_GNU to empty by default, to preserve the old behavior

tests: Improve test coverage

msgfilter: Fix quote handling of doubled grave charaters

* filter-quote.c (convert_ascii_quote_to_unicode): Fix handling of
doubled grave characters.

build: Remove unused variables

build: Don't regenerate man.1 if man.1.in does not exist

* Makefile.am (gettext.1 ngettext.1): Don't try to replace
@localedir@ in .1.in if x-to-1 fails; rewrite the target using the
snippet in the Autoconf manual.

build: Fix Woe32 cross build

* msgfmt.c (add_languages): New function split from get_languages.
(get_languages): Use add_languages instead of manually parsing
LINGUAS envvar with strtok_r possibly provided by libgettextlib.

* x-c.h (literalstring_c): Remove unnecessary DLL_VARIABLE.
* xgettext.c (arglist_parser_alloc): Use LET_NONE instead of 0.
(arglist_parser_remember): Likewise.
* xgettext.h (enum literalstring_escape_type): New enum value
LET_NONE.

* woe32dll/gettextsrc-exports.c: Don't export line_comment and
po_lex_iconv if undefined.

intl: Define possibly undefined _GL_UNUSED in xsize.c

doc: Fix wording

tests: Fix file modes

Update after Gnulib changed.

man: Don't depend on the binary executable

NEWS: Mention msgattrib --empty

msgattrib: Add --empty option

vala: Interpret string literals lazily

* x-vala.c (P7_EOF, P7_STRING_END, P7_QUOTES, P7_QUOTE, P7_NEWLINE)
(UNICODE, IS_UNICODE, UNICODE_VALUE): Remove.
(phase7_getc): Remove.
(phase7_ungetc): Remove.
(phase3_get): Use 'phase2_get' directly to extract string
literals; use 'arglist_parser_remember_literal' instead of
'arglist_parser_remember'.
(literalstring_c): Declare external variable.
(extract_balanced): Remove the
'xgettext_current_source_encoding' setting to prevent encoding
conversion around 'arglist_parser_done'.
(token_ty): New field 'escape'.
* x-vala.h (SCANNERS_VALA): Register 'literalstring_c' as a
literalstring_parser.

c: Interpret string literals lazily

* x-c.c (P7_EOF, P7_STRING_END, P7_QUOTES, P7_QUOTE, P7_NEWLINE)
(UNICODE, IS_UNICODE, UNICODE_VALUE): Remove.
(phase7_get): Remove.
(phase7_ungetc): Remove.
(phase5_get): Use 'phase3_get' directly to extract string
literals; use 'arglist_parser_remember_literal' instead of
'arglist_parser_remember'.
(literalstring_parse): New function.
(literalstring_c): New variable.
(extract_parenthesized): Remove the
'xgettext_current_source_encoding' setting to prevent encoding
conversion around 'arglist_parser_done'.
* x-c.h (SCANNERS_C): Register 'literalstring_c' as a
literalstring_parser.
(literalstring_c): New variable declaration.

xgettext: Provide a way to interpret string literals lazily

* xgettext.c (extract_ty): New field 'literalstring_parser'.
(current_literalstring_parser): New variable.
(extract_from_file): Set 'current_literalstring_parser'.
(savable_comment_convert_encoding): New function.
(arglist_parser_remember_literal): New function.
(arglist_parser_remember): Call 'arglist_parser_remember_literal'.
(arglist_parser_done): Call literalstring_parser on msgctxt,
msgid, and msgid_plural before calling 'remember_a_message';
convert encoding of msgid_comment.
* x-*.h: Register 'literalstring_parser' through SCANNER_*.
* xgettext.h (enum literalstring_escape_type): New enum.
(struct literalstring_parser): New struct.
(struct partial_call): New fields 'msgctxt_escape',
'msgid_escape', and 'msgid_plural_escape'.
(arglist_parser_remember_literal): New function declaration.
(savable_comment_convert_encoding): New function declaration.

xgettext: Make mixed_string_buffer_done always return UTF-8 string

examples: Don't fail on "make install" when a PO file is missing

* Makefile.am (install-data-local): Don't fail if a PO file does
not exist, but warn user to do "make dist".

doc: Add tips to maintain PO files in the repository

* gettext.texi (Translations under Version Control): New section.

doc: Talk about generic VCS, not CVS

* gettext.texi (Version Control Issues): Rename from "CVS Issues";
talk about generic issues when using version control systems.

maint: Update Admin/plans

NEWS: Mention the prefixed comment-tag change

Add missing file tests/xgettext-11

configure: require automake >= 1.13

Macro AM_EXTRA_RECURSIVE_TARGETS defined in Automake 1.13.
* configure.ac (AM_INIT_AUTOMAKE): Require Automake 1.13 or later.

tests: Add test for prefixed comment tag

* xgettext-11: New file.
* Makefile.am (TESTS): Add new test.

xgettext: Recognize comment tag prefix

Reported by Jiang Xin in
<http://article.gmane.org/gmane.comp.version-control.git/246462>.
* xgettext.c (remember_a_message): Discard a string prefixed to the comment
tag from all remaining comment lines.

NEWS: Mention Scheme scanner change

Update ChangeLog.

NEWS: Mention more changes for 0.19

c: Support C99-style Unicode character escapes

* x-c.c: Include assert.h and po-charset.h.
(P7_QUOTES, P7_QUOTE, P7_NEWLINE): Redefine as a negative integer.
(P7_EOF, P7_STRING_END): New definitions.
(UNICODE): New macro.
(IS_UNICODE): New macro.
(UNICODE_VALUE): New macro.
(phase7_getc): Recognize "\unnnn" and "\Unnnnnnnn".
(phase5_get): Use mixed_string_buffer for parse string literal.

xgettext: Allow mixed_string_buffer_done to return non-UTF-8 string

Fix typo in commit f597467a

xgettext: Fix memleaks around wrong usage of mixed_string_buffer_done

xgettext: Add more comments to mixed_string_buffer usage

vala: Support C99-style Unicode escapes

xgettext: Factor out commonly used mixed_string_buffer

* x-python.c (init_mixed_string_buffer)
(mixed_string_buffer_append_byte)
(mixed_string_buffer_append_unicode_grow)
(mixed_string_buffer_append_unicode)
(mixed_string_buffer_flush_utf16_surr)
(mixed_string_buffer_flush_curr_buffer)
(mixed_string_buffer_append, mixed_string_buffer_result)
(free_mixed_string_buffer): Move to...
* xgettext.c: ...here.
(mixed_string_buffer_alloc): Rename from init_mixed_string_buffer.
(mixed_string_buffer_append_to_curr_buffer): Rename from
mixed_string_buffer_append_byte.
(mixed_string_buffer_append_to_utf8_buffer): Rename from
mixed_string_buffer_append_unicode.
(mixed_string_buffer_grow_utf8_buffer): Rename from
mixed_string_buffer_append_unicode_grow.
(mixed_string_buffer_append_char): Split from
mixed_string_buffer_append.
(mixed_string_buffer_append_unicode): Split from
mixed_string_buffer_append.
(mixed_string_buffer_done): New function merging
mixed_string_buffer_result and free_mixed_string_buffer.
* xgettext.h (mixed_string_buffer): New struct moved from
x-python.c; add logical_file_name and line_number fields.
(mixed_string_buffer_alloc): New function declaration.
(mixed_string_buffer_append_char): New function declaration.
(mixed_string_buffer_append_unicode): New function declaration.
(mixed_string_buffer_done): New function declaration.
* x-javascript.c (init_mixed_string_buffer)
(mixed_string_buffer_append_byte)
(mixed_string_buffer_append_unicode_grow)
(mixed_string_buffer_append_unicode)
(mixed_string_buffer_flush_utf16_surr)
(mixed_string_buffer_flush_curr_buffer)
(mixed_string_buffer_append, mixed_string_buffer_result)
(free_mixed_string_buffer): Remove.

Fix commit 4dc36d2f

Makefile.in.in: Rename DIST_DEPENDS_ON_POT to DIST_DEPENDS_ON_UPDATE_PO