More efficient retrieval of file size

Move grub_disk_write out of kernel into disk.mod.

* grub-core/kern/misc.c (grub_vsnprintf_real): Unify int and wchar
handling.

* grub-core/kern/misc.c (grub_abort): Make static

* grub-core/kern/misc.c (grub_vsnprintf_real): Don't attempt to
transform invalid unicode codepoints.

* grub-core/kern/misc.c (grub_vsnprintf_real): Remove needless explicit
\0 checking.

Revert " * util/grub-mkstandalone.in: Remove needless copying since we already"

The copying in question was needed.

This reverts commit 8154884dd4ee8e1134ca5124ab786173dee279ad.

* grub-core/lib/legacy_parse.c: Add support for "nd" disk.

Consolidate cpuid code.

Move cpuid code to cpuid.h and TSC code to tsc.c.

* util/grub.d/00_header.in: Don't use LANG if it's not set.

Missing Changelog entry

* util/grub-mkconfig.in: Replace $0 with $self.
* util/grub-reboot.in: Likewise.
* util/grub-set-default.in: Likewise.

* docs/osdetect.cfg: New file.

* tests/util/grub-shell.in: Add new --debug option.

* tests/test_unset.in: New test.

* tests/test_sha512sum.in: New test.

* grub-core/fs/iso9660.c: Replace strncat with memcpy.
* include/grub/misc.h: Remove strncat.
* grub-core/lib/posix_wrap/string.h: Likewise.

Missing Changelog entry

* tests/date_unit_test.c: New test.

* grub-core/normal/datetime.c (grub_unixtime2datetime): Fix mishandling
of first three years after start of validity of unixtime.

* grub-core/normal/menu_entry.c (get_logical_num_lines): Use unsigned
division as the one making more sense.
(update_screen): Likewise.
(complete): Likewise.

* grub-core/normal/menu_entry.c (complete): Make sure that width is >0.

Make char and string width grub_size_t rather than grub_ssize_t.

* grub-core/normal/cmdline.c (grub_history_get): Make argument into
unsigned.
(grub_history_replace): Likewise.

* grub-core/disk/raid6_recover.c: Use unsigned arithmetics when
appropriate.

* grub-core/video/bitmap_scale.c: Use unsigned arithmetics when
appropriate.

* grub-core/video/fb/fbblit.c: Use (255 ^ x) rather than (255 - x).
Use unsigned divisions rather than signed variants.

* grub-core/video/readers/png.c (grub_png_convert_image): Use
unsigned arithmetics.
Add missing break.

* grub-core/video/readers/jpeg.c: Use unsigned where appropriate.

* grub-core/fs/zfs/zfs.c (xor_out): Use unsigned modular arithmetics
rather than signed one.
(recovery): Likewise.

* grub-core/net/dns.c (hash): Use unsigned arithmetic.

* grub-core/io/gzio.c (test_zlib_header): Use undigned modulo rather
than signed.

Merge branch 'master' of git.sv.gnu.org:/srv/git/grub

* grub-core/fs/ext2.c (EXT2_BLOCK_SIZE): Make unsigned.

* grub-core/commands/gptsync.c (lba_to_chs): Use proper types rather
than int.

Documentation cleanup in response to ML discussion.

 [v0] Accepted with modifications by phcoder@
 [v1] Introduce subsections within Security
 [v1] Correct errors regarding public key files not being automatically signature-checked in trust and verify_detached
 [v1] Replace check_signatures=enforce with check_signatures set to enforce
 [v1] Move detailed discussion of using signatures out of check_signatures environment variable description
 [v1] Use long form for option flags to security-relevant commands
 [v2] Explain the key fingerprint format for distrust and list_trusted.
 [v2] Eliminates references to grub-mkimage and UEFI Secure Boot.
 [v3] Updates in response to addition of --skip-sig to trust and verify_detached
 [  ] Restore @xref for cross-references at the start of sentences

* conf/Makefile.common (CPPFLAGS_KERNEL): Add -DGRUB_KERNEL=1.
* include/grub/dl.h (GRUB_MOD_INIT), (GRUB_MOD_FINI): Define
functions when compiling for kernel.

* grub-core/lib/progress.c (grub_file_progress_hook_real): Cast to
unsigned long long when using %llu.

* grub-core/lib/progress.c (grub_file_progress_hook_real): Refresh
terminal after updating progress.

* grub-core/boot/i386/pc/startup_raw.S (grub_gate_a20): Remove
argument. We don't disable Gate A20 in this code.

* grub-core/boot/i386/qemu/boot.S: Ensure that A20 is enabled.
Conceptually based on change in branch "vbe-on-coreboot".

* grub-core/video/i386/pc/vbe.c (grub_video_vbe_setup): Replace
numeric constants with their symbolic equivalent.
Taken from branch "vbe-on-coreboot".

* docs/grub.texi: Fix ordering and use pxref rather than xref.

* grub-core/lib/progress.c (grub_file_progress_hook_real): Use
divmod64 for offset division.

Rename .bzrignore to .gitignore. Add "*.o" rule.

    * .bzrignore: Renamed to...
    * .gitignore: ...this.

Merge branch 'master' of git.sv.gnu.org:/srv/git/grub

Add progress module to display load progress of files.

* grub-core/lib/progress.c: New file.
* grub-core/Makefile.core.def (progress): New module.
* grub-core/kern/file.c (grub_file_open): File name added.
* (grub_file_read): Progress hook added.
* grub-core/fs/cbfs.c (grub_cbfs_read): Likewise.
* grub-core/fs/cpio_common.c (grub_cpio_read): Likewise.
* grub-core/net/net.c (grub_net_fs_read_real): Likewise.
* include/grub/file.h (struct grub_file): Add progress module
* members.
* include/grub/term.h (struct grub_term_output): Likewise.
* grub-core/osdep/unix/emuconsole.c (grub_console_term_output):
Terminal velocity added.
* grub-core/osdep/windows/emuconsole.c (grub_console_term_output):
* Likewise.
* grub-core/term/arc/console.c (grub_console_term_output): Likewise.
* grub-core/term/efi/console.c (grub_console_term_output): Likewise.
* grub-core/term/gfxterm.c (grub_video_term): Likewise.
* grub-core/term/i386/coreboot/cbmemc.c (grub_cbmemc_term_output):
* Likewise.
* grub-core/term/i386/pc/console.c (grub_console_term_output):
* Likewise.
* grub-core/term/i386/pc/vga_text.c (grub_vga_text_term): Likewise.
* grub-core/term/ieee1275/console.c (grub_console_term_output):
* Likewise.
* grub-core/term/morse.c (grub_audio_term_output): Likewise.
* grub-core/term/serial.c (grub_serial_term_output): Likewise.
* grub-core/term/spkmodem.c (grub_spkmodem_term_output): Likewise.
* grub-core/term/uboot/console.c (uboot_console_term_output):
* Likewise.

Import from bzr to git

Verify signatures of signatures unless --skip-sig is specified.

* grub-core/kern/misc.c (grub_vsnprintf_real): Remove needless explicit
\0 checking.

Saves 70 bytes on compressed image.

* grub-core/kern/misc.c (grub_strtoull): Remove needless *ptr != 0
check.

Saves 10 bytes on compressed image.

* grub-core/kern/misc.c (grub_isprint): Move to ...
* include/grub/misc.h (grub_isprint): ... here. Make inline.

Saves 20 bytes on compressed image due to remving exporting.

* grub-core/fs/ntfs.c (grub_ntfs_mount): Remove redundant check.

Saves 5 bytes on compressed image.

* grub-core/fs/ntfs.c: Move common UTF-16 handling to a separate
function get_utf8.

Saves 379 bytes on compressed image.

* grub-core/fs/ntfs.c: Handle 48-bit MFT no.

* grub-core/fs/ntfs.c (read_run_data): Rewrite using bitfields.

Saves 40 bytes on compressed image.

Add missing Changelog comment

* grub-core/fs/ntfs.c (grub_ntfs_iterate_dir): Use grub_uint8_t for
mask rather than 64-bit type.

Saves 20 bytes on compressed image.

* grub-core/fs/ntfs.c (read_data): Move code for compressed data to ...
* grub-core/fs/ntfscomp.c (ntfscomp): ... here.

* grub-core/kern/disk.c (grub_disk_write): Use malloc/free instead of
variable length arrays.

Saves 50 bytes on compressed image.

* grub-core/loader/i386/bsd.c: Remove variable length arrays.

* grub-core/fs/ufs.c: Remove variable length arrays.

* grub-core/fs/ntfs.c: Add comment about fixed allocation size.

* grub-core/fs/zfs.c: Remove variable length arrays.
Reduces zfs.mod by 160 bytes (208 compressed).

* grub-core/fs/zfs/zfs.c (check_pool_label): Fix memory leak.

* grub-core/net/arp.c: Remove variable length arrays.
* grub-core/net/bootp.c: Likewise.
* grub-core/net/dns.c: Likewise.
* grub-core/net/icmp6.c: Likewise.
* grub-core/net/net.c: Likewise.

* grub-core/fs/ntfs.c: Remove variable length arrays.
Increases ntfs.mod by 64 bytes (but decreases by 3 when
compressed).

* grub-core/fs/hfs.c: Remove variable length arrays.
Reduces hfs.mod by 8 bytes (52 compressed).

* grub-core/fs/udf.c: Remove variable length arrays.
Increases udf.mod by 128 bytes (but decreases by 13 compressed when
compressed).

* grub-core/fs/iso9660.c: Remove variable length arrays.
Increases iso9660.mod by 200 bytes (but decreases by 79 compressed when
compressed).

* grub-core/fs/nilfs2.c: Remove variable length arrays.
Increases xfs.mod by 24 bytes (but decreases by 115 compressed when
compressed).

* grub-core/fs/xfs.c: Remove variable length arrays.
Reduces xfs.mod by 40 bytes (43 compressed).

* grub-core/fs/fshelp.c: Remove variable length arrays.
Reduces fshelp.mod by 116 bytes (23 compressed).

* grub-core/normal/completion.c: Remove variable length arrays.
* grub-core/normal/menu_entry.c: Likewise.

Reduces normal.mod by 496 bytes.

* grub-core/fs/minix.c: Remove variable length arrays. Reduces jfs.mod
by 356 bytes (158 compressed).

* grub-core/fs/jfs.c: Remove variable length arrays. Reduces jfs.mod
by 364 bytes (169 compressed).

* grub-core/fs/bfs.c: Remove variable length arrays. Reduces afs.mod and
bfs.mod size by 556 resp 740 bytes (288 resp 334 compressed).
* include/grub/types.h (grub_unaligned_uint64_t): New type.

Lift 255x255 erminal sie restriction to 65535x65535. Also change from
bitmasks to small structures of size chosen to fit in registers.

* conf/Makefile.common: Use -freg-struct-return on i386. This
decreases code size and improves performance.

* grub-core/osdep/unix/exec.c: Fix compilation error on emu.

* grub-core/kern/misc.c (grub_vsnprintf_real): Fix formatting of
"(null)" string.
Simplify expressions to save around 256 bytes in kernel.img.
* tests/printf_unit_test.c (printf_test): Add "(null)" tests.

* grub-core/tests/video_checksum.c (grub_video_capture_write_bmp):
Use GRUB_UTIL_FD_O_* rather than O_*.

Add haiku-specific functions.

* grub-core/kern/emu/hostdisk.c: Remove few leftover includes.

Move stat () and device mode checking into OS-dependent files as
long as performance doesn't suffer.

Split make_system_path_relative_to_its_root into separate file
relpath.c from getroot.c as it's common between unix and haiku
but otherwise haiku doesn't use any functions from unix getroot.c.

* grub-core/osdep/aros/hostdisk.c (grub_util_is_directory):
New function.
(grub_util_is_special_file): Likewise.

* grub-core/osdep/unix/getroot.c: Move exec functions to ...
* osdep/unix/exec.c: ... here. Add few additional exec_* variants.

* grub-core/lib/libgcrypt_wrap/cipher_wrap.h: Define size_t to
grub_size_t. This fixes the case when size_t mismatches grub_size_t.

* util/grub-mkimagexx.c (make_reloc_section): Fix memory leak.
(load_image): Likewise.

* util/grub-render-label.c: Move backend part to ...
* util/render-label.c: ... here.

* util/grub-render-label.c: Move backend part to ...
* util/render-label.c: ... here.

* grub-core/osdep/random.c: Use unix/random.c on haiku. Haiku uses
yarrow (by B. Schneier et al) for its /dev/urandom (similar to FreeBSD).

* grub-core/osdep/generic/blocklist.c: Add missing include to string.h.

* grub-core/disk/efi/efidisk.c (grub_efidisk_get_device_name): Handle
CD-ROM in case when it's declared as having subpartitions.

Don't add -lm on haiku.

* configure.ac: Define BUILD_LIBM to -lm on most platforms
and empty on haiku.
* grub-core/Makefile.am (gentrigtables): Use $(BUILD_LIBM) rather than
-lm.

* configure.ac: Use -melf_*_haiku as target on haiku.

* Makefile.util.def: Add util/setup.c to extra_dist.

* grub-core/kern/i386/pc/mmap.c (grub_machine_mmap_iterate): Pass
unknown types through.