autogen.sh: Allow overriding the python to be used by setting $PYTHON.

Some installations have several python versions installed. Allow user
to choose which one to use by setting $PYTHON.

update gnulib/argp-help.c to fix garbage in grub-mknetdir --help output

argp_help attempts to translate empty string, which results in printing
meta information about translation, like in

bor@opensuse:~/build/grub> grub2-mknetdir --help
Использование: grub2-mknetdir [ПАРАМЕТР…]
Project-Id-Version: grub 2.02-pre2
Report-Msgid-Bugs-To: bug-grub@gnu.org
...

Update gnulib/argp-help.c to the current version which fixes this
(commit b9bfe78424b871f5b92e5ee9e7d21ef951a6801d).

update m4/extern-inline.m4 to upstream version to fix compilation on FreeBSD

In file included from util/grub-mkimage.c:54:0:
./grub-core/gnulib/argp.h:627:49: error: '__sbistype' is static but
used in inline function '_option_is_short' which is not static
[-Werror] cc1: all warnings being treated as errors gmake[2]: ***
[util/grub_mkimage-grub-mkimage.o] Error 1

Update m4/extern-inline.m4 to current upstream gnulib version that
contains fix for this (commit b9bfe78424b871f5b92e5ee9e7d21ef951a6801d).

Reported-By: Beeblebrox <zaphod@berentweb.com>

syslinux_parse: Fix the case of unknown localboot.

Reported by: Jordan Uggla

configure.ac: Fix the name of pciaccess header.

Fix canonicalize_file_name clash.

canonicalize_file_name clashed with gnulib function. Additionally
it was declared in 2 places: emu/misc.h and util/misc.h. Added
grub_ prefix and removed second declaration.

Remove emu libusb support.

It's disabled by default and has been broken for a long time.
As nobody is interested in fixing and maintaining it, remove it.

configure.ac: Remove unused COND_clang

Remove libgcc dependency.

libgcc for boot environment isn't always present and compatible.
libgcc is often absent if endianness or bit-size at boot is different
from running OS.
libgcc may use optimised opcodes that aren't available on boot time.
So instead of relying on libgcc shipped with the compiler, supply
the functions in GRUB directly.
Tests are present to ensure that those replacement functions behave the
way compiler expects them to.

types.h: Use __builtin_bswap* with clang.

clang pretends to be GCC 4.2 but we use __builtin_bswap* only with GCC 4.3+.
clang support __builtin_bswap*, so use it.

configure.ac: Set $CPPFLAGS when checking for no_app_regs.

Fixes compilation for sparc64 with clang.

Don't continue to query block-size if disk doesn't have it.

Stops poluting screen with a lot of "block-size: exception -21".

grub-probe: free temporary variable

exclude.pot: Add new technical strings

grub-probe: Mark a "[default=]" for translation.

grub-shell: Add missing --locale-directory.

Fixes the language tests is no make install was done.

ntfs_test: Skip is setfattr is unavailable.

emu/cache: Change declaration of __clear_cache to match builtin declaration.

Fixes compile of arm64-emu.

arm/dl: Fix handling of nonstandard relocation sizes

gzio: Optimize by removing division.

raid6: Optimize by removing division.

dmraid_nvidia: Fix division by 0 and missing byte-swap.

crypto: restrict cipher block size to power of 2.

All current ciphers have blocks which are power of 2 and it's
unlikely to change. Other block length would be tricky to handle anyway.
This restriction allows avoiding extra divisions.

jpeg: Optimise by replacing division with shifts.

png: Optimize by avoiding divisions.

Add missing lib/division.c

fbblit: Optimize by replacing division with additions and shifts.

bitmap_scale: Optimize by moving division out of the loop.

minilzo: Skip parts tha we don't need.

mips: Fix soft-float handling.

Add -msoft-float alongside clang arguments to specify ABI.
Specify ABI in asm files explicitly.
This trigers asm warning due to gcc failing to propagate -msoft-float
but it's tolerable.

Add missing grub_ prefix in memcpy invocation

Allow clang compilation for thumb with -mthumb-interwork.

clang already uses -mthumb-interwork behaviour even thout it doesn't
support the option.

arm64: Fix compilation failure.

Don't supply +nosimd to asm files.
Otherwise +nosimd coming from flags forbids some of instructions
used in cache_flush.

Supply signed division to fix ARM compilation.

Previously we supplied only unsigned divisions on platforms that need software
division.
Yet compiler may itself use a signed division. A typical example would be a
difference between 2 pointers which involves division by object size.

acpi: Fix unused function warning.

configure.ac: Add ia64-specific way to disable floats.

i386/tsc: Fix unused function warning on xen.

Experimental support for clang for sparc64.

Automatically discover command line options to make clang and
gcc behave in same way.

Tested with qemu.

Discover which option provides soft-float on configure stage.

Deals with clang needing other arguments to stop issuing floating
instructions than gcc.

mips: Switch to more portable .org

Binary is unchanged.

sparc64: Switch to more portable .org.

Binaries are unchanged.

kernel-8086: Switch to more portable .org.

Relax requirements on asm for non-BIOS i386 platforms.

These platforms don't have a hard limit on size of resulting code16
code, so we don't care if assembly is bigger than necessarry.

qemu: Switch to more portable .org

Binary is checked identical.

qemu: Fix GateA20 enabling.

GateA20 code was inactive due to address error.

qemu: Fix compilation

Remove realmode.S from coreboot and qemu.

It's not used there.

Remove obsolete ADDR32 and DATA32 checks.

i386: Remove needless ADDR32 prefixes when address is known and fixed.

Shaves off 6 bytes in lzma_decompress.img.

i386-pc/boot: Explicitly mark kernel_address[_high] as local.

Otherwise apple asm might try to make accesses relocatable.

Change dot assignmnet to more portable .org.

Binary is unchanged (verified)

i386: Move from explicit ADDR32/DATA32 prefixes to instruction suffixes.

Is more portable.
Binary is unchanged (verified).

Test which flags make our asm compile.

Previously we relied on assumption that clang always needs -no-integrated-as
but it's not always true.

INSTALL: clarify that clang support is experimental

zfs/mzap_lookup: Fix argument types

wildcard: Mark unused argument as such.

ofdisk: Exclude floppies from scanning.

It causes similar hang as CD on at least the qemu.

configure: Add -msoft-float to CCASFLAGS

Otherwise mismatch between API flags triggers linker failure

mips/startup_raw: Use more portable .asciz

Provide __aeabi_mem{cpy,set}

Fixes ARM compilation

div_test: Don't try to divide by zero

INSTALL: Fix names of host flags to match actual behaviour

Strip .MIPS.abiflags which causes compile failure

configure: Move adding of include options to the very end to avoid subshell.

configure: Add missing comma.

ext2: Ignore INCOMPAT_MMP.

It's not really incompatible as long as driver never writes to FS.

ext2: Support META_BG.

This fixes bug that system would become unbootable after ext*
online resize if no resize_inode was created at ext* format time.

tests: remove hardcoded paths from syslinux_test

abs_top_srcdir appeared in Autoconf 2.52f. Minimal grub requirement
is 2.60 so we should be good here.

build-sys: add syslinux test files to tarball

Add test for syslinux converter

Don't remove initrd= parameter.

Based on simplified patch by Lunar.

Reported by: Lunar

syslinux_parse: Always output comments even if no entries are found.

diskfilter_make_raid: more memory leaks in failure path

disk/lvm: Use zalloc to ensure that segments are initialised to sane value.

Reported by: EmanueL Czirai.

multiboot2: Fix information request tag size calculation

Signed-off-by: Daniel Kiper <daniel.kiper@oracle.com>

diskfilter: fix double free of lv names for mdraid

Avoid micro-optimization in grub_diskfilter_make_raid and make sure
name and fullname are independent strings. This avoids need to special
case it everywhere else.

Also fix memory leak in failure case in grub_diskfilter_make_raid.

Closes: 41582

diskfilter: fix crash in validate_lv for mdraid arrays

Commit 750f4bacd3262376ced3f837d8dc78f834ca233a put LV validation before
actual vg assignment. Make grub_diskfilter_make_raid to assign ->vg as
happens in other cases for consistency. Also clean up redundant code and add
explicit NULL lv->vg check in validate_lv.

Also fix segment validation in validate_lv; it became obvious when crash
was fixed.

Closes: 44199

util: mkimage, fix gcc5 build failure

gcc5 reports:
../util/mkimage.c: In function 'grub_install_get_image_target':
../util/mkimage.c:954:5: error: loop exit may only be reached after undefined behavior [-Werror=aggressive-loop-optimizations]
     && j < ARRAY_SIZE (image_targets[i].names); j++)
     ^
../util/mkimage.c:953:39: note: possible undefined statement is here
      for (j = 0; image_targets[i].names[j]
                                        ^

Well, let's move the index 'j' test before accesing the array to:
1) make the loop obvious
2) make gcc happy

Signed-off-by: Jiri Slaby <jslaby@suse.cz>

arm: implement additional relocations generated by gcc 4.9 at -O3

GCC 4.9 also generates R_ARM_THM_MOVW_ABS_NC and R_ARM_THM_MOVT_ABS,
as an alternative to ABS32.

Signed-off-by: Leif Lindholm <leif.lindholm@linaro.org>

setup: fix blocklist size calculation

Found by: Coverity scan.

grub-fstest: fix descriptor leak

Found by: Coverity scan.

net/pxe: fix error condition

Test return value of grub_netbuff_reserve(), buf itself cannot be
NULL here.

Found by: Coverity scan.

grub-mkimage: fix potential NULL pointer dereference

Move fatal check whether symtab_section is NULL before first reference.

Found by: Coverity scan.

net/ip: check result of grub_netbuff_push

Found by: Coverity scan.

tests: add test command file tests

This requires access to files in both host and grub image, so
implementing as separate test unit instead of script test was
more easy.

test: consistently use TMPDIR and same name pattern for temp files

test: fix previous commit - we need to return from subexpression

( ... ) was processed recursively, we need to return from it. Revert
this change.

test: do not stop after first file test or closing bracket

Closes: 44115

configure.ac: don't use -msoft-float for arm64

aarch64 toolchains do not support the -msoft-float option added by
commit 3661261f. Insted, for arm64 use -march=armv8-a+nofp+nosimd.

Reported-by: Ryan Harkin <ryan.harkin@linaro.org>

script/execute.c: fix memory leak.

Make sure to continue loop over array after failure to free
allocated strings.

Found by: Coverity scan.

syslinux_parse: fix memory leak.

Found by: Coverity scan.

Change quotes to match overall style in NEWS

loader/xnu: fix memory leak.

Foound by: Coverity scan.

util/grub-probe: fix memory leaks.

Found by: Coverity scan.

fs/hfsplus: fix memory leak.

Found by: Coverity scan.

fs/zfs/zfscrypt.c: fix indentation.

fs/zfs/zfscrypt.c: fix memory leaks.

Found by: Coverity scan.

commands/parttool: fix memory leak.

Found by: Coverity scan.

fs/zfs/zfs.c: fix memory leak.

Found by: Coverity scan.

linux/ofpath: fix descriptor leak

Found by: Coverity scan