test: check for /usr/lib/systemd/system for systemd enabled rootfs

Follow-up to bc2b6b0

test: graceful poweroff for systemd based tests

This PR makes the test case more life-like and prepares
for testing dracut-shutdown.

test: remove special handling of the plymouth binary/process

Special handling is no longer required and it just adds
congnitive load to the project.

plymouth handling should be consolidated into the
plymouth dracut modules as much as possible.

fix(nfs): do not set DRACUT_RESOLVE_LAZY for musl

Also move inst_libdir_file as the last step to handle
the error case better.

Fixes https://github.com/dracut-ng/dracut-ng/issues/1087

feat(systemd-sysusers): run systemd-sysusers as part of the build process

This PR makes the boot process faster and the generated initrd smaller.

It also make the code easier to maintain.

The primary goal of this PR is refactoring and removing code,
this is why it is not marked as perf() in the commit.

That said, with this PR systemd-sysusers no longer needs to be copied
into the initrd, so that is about 50KB saving both on when initrd gets
saved/compressed and when it gets loaded and uncompressed.

This PR also make the debugging slightly easier as one can just
inspect /etc/passwd with lsinitrd instead of trying to figure out
which users are created runtime.

feat(dracut-systemd): install dracut-* into /usr/bin

Modern systems have /usr merged and `/bin` pointing to `/usr/bin`. So
install all `dracut-*` scripts into `/usr/bin` instead of `/bin`.

chore(deps): bump softprops/action-gh-release from 2.2.0 to 2.2.1

Bumps [softprops/action-gh-release](https://github.com/softprops/action-gh-release) from 2.2.0 to 2.2.1.
- [Release notes](https://github.com/softprops/action-gh-release/releases)
- [Changelog](https://github.com/softprops/action-gh-release/blob/master/CHANGELOG.md)
- [Commits](https://github.com/softprops/action-gh-release/compare/v2.2.0...v2.2.1)

---
updated-dependencies:
- dependency-name: softprops/action-gh-release
  dependency-type: direct:production
  update-type: version-update:semver-patch
...

Signed-off-by: dependabot[bot] <support@github.com>

chore(crypt): do not use recursive on removing a file

ci(opensuses): limit the number of warnings with small fixes

procps is already installed.
iproute maps to iproute2.
kernel maps to kernel-vanilla
nfs-utils maps to nfs-kernel-server
qemu-kvm maps to qemu

test(FULL-SYSTEMD): systemd-network-management dracut module coverage

Follow-up to 75f3a19. Only mask systemd-sysuser for read-only test.

test(FULL-SYSTEMD): when systemd-networkd is available, install it

test(FULL-SYSTEMD): when dbus-broker is available, add dbus dependent modules

Goal is to gradually test more systemd modules and without destabilizing
the CI.

ci(opensuse): install systemd-portable

systemd-portable is installed on all other systemd enabled containers
except opensuse. systemd-portable is an established tool,
there is no need to handle teh case in the CI when it is not available.

revert(ci): uninstall btrfs-progs for centos

ci(centos): install btrfs-progs

chore: drop support for ifcfg

Follow-up to 8ba8d55

test: test.sh should run privileged containers for development

Some tests would only pass in privileged containers.

Follow-up to 1a4f523.

chore(i18n): install kbd_mode and stty optionally

test: simplify tty handling

fix(crypt): crypt-lib.sh optionally depends on stty

Follow-up to 1af3531.

refactor(i18n): move code around to increase readability

test(FULL-SYSTEMD): only set kernel command line when needed

fix(i18n): make /etc/vconsole.conf optional

/etc/vconsole.conf should be optional as these variables can be set
on the kernel command line as well.

chore(systemd): vconsole.conf and locale.conf managed by i18n module

chore(base): make chown optional

Take this opportunity to sort the lists.

fix(dracut-systemd): check SYSTEMD_SULOGIN_FORCE before allowing passwordless

Follow-up to https://github.com/dracutdevs/dracut/commit/32f68c1

This functionality matches default systemd (and as such mkosi, mkinitcpio).

fix(nfs): use the same directory set ownership and permissions as the host

Related bug report: https://bugzilla.redhat.com/show_bug.cgi?id=1924950

fix(systemd-tmpfiles): passwd and group file management

Do not install full unmodified /etc/passwd and /etc/group form the host.

This code is misleading as it is always a no-op since /etc/passwd
would already exists and this line would be ignored.

ci(opensuse): make mkosi-initrd installation more complete

Add '--privileged' flag for running systemd tests to make sure
mkosi-initrd runs well.

test(BASIC): simplify and further strip down basic test

Move fips testing into the more complex STORAGE test.

Build the kernel command line option into the BASIC initrd.

test: make sure TEST_FSTYPE kernel driver is included in the initrd

ci: test xfs on Fedora and btrfs on Arch

btrfs is not readily available on CentOS.

Fixes: https://github.com/dracut-ng/dracut-ng/issues/1079

ci(opensuse): remove the workaround to disable hostonly mode

Switch back to ext4 from btrfs for now to ensure first that
hostonly mode now works with openSUSE.

ci(fedora): change the default FSTYPE to btrfs for Fedora

ci(opensuse): switch from dnf to zypper for package management

zypper is the recommended package manager for openSUSE.

Also mkosi openSUSE package has a dependency on zypper.

test(FULL-SYSTEMD): add a reference test step for mkosi

Fail the test if mkosi installs some services that dracut does not.

ci(opensuse): install mkosi for reference

mkosi is well supported in openSUSE and I was not able to
make it work in the Arch container, so lets move mkosi
reference testing from Arch to openSUSE.

ci(debian): install console-data instead of console-setup to test i18n module

console-data is required for loadkeys to work properly.

If console-data is not installed, the following command fails

loadkeys  --default
loadkeys: Unable to find file: defkeymap.map

fix(ENC-RAID-LVM): correct test name and remove obsolete step

Follow-up to 10d5b3d .

ci(centos): remove workaround for centos

Follow-up to e78963f .

Workaround is no longer needed after 23ef35d .

feat(crypt): remove empty /etc/crypttab to allow creating it later

crypt module should not install an empty /etc/crypttab in hostonly mode.

Some distributions ship with an /etc/crypttab without entries (just
with comments). In those distributions installing /etc/crypttab
as part of --install command line option in hostonly mode would not
work as expected.

Fixes: https://github.com/dracut-ng/dracut-ng/issues/1057

ci(ubuntu): install plymouth-themes

https://bugs.launchpad.net/ubuntu/+source/dracut/+bug/1596220 is fixed.

test(DMSQUASH): increase partition size

initrd on void is larger due to non-hostonly configuration.
Increase partition size to accommodate the larger initrd.

fix(test): running tests on bare metal fail with syntax error

```
$ sudo make TESTS="62" check
make[1]: Entering directory '/mnt/work/dracut-ng/test/TEST-62-BONDBRIDGEVLAN'
/mnt/work/dracut-ng/test/test-functions: line 252: [: : integer expression expected
```

Fixes add225f6b4198c7eaa20e5504b0711ee37bd7f13

fix(systemd-pcrphase): include systemd-pcrphase in hostonly mode

Commit https://github.com/jozzsi/dracut-ng/commit/a2193b7 enables
to include systemd-pcrphase in hostonly mode without undesired
side-effects.

fix(systemd-sysext): install new initrd-specific units

The old service units will no longer be activated in the initrd.

Added in https://github.com/systemd/systemd/commit/7a8556b90119412db8f55534c72a1158edf275e6

chore(deps): bump softprops/action-gh-release from 2.1.0 to 2.2.0

Bumps [softprops/action-gh-release](https://github.com/softprops/action-gh-release) from 2.1.0 to 2.2.0.
- [Release notes](https://github.com/softprops/action-gh-release/releases)
- [Changelog](https://github.com/softprops/action-gh-release/blob/master/CHANGELOG.md)
- [Commits](https://github.com/softprops/action-gh-release/compare/v2.1.0...v2.2.0)

---
updated-dependencies:
- dependency-name: softprops/action-gh-release
  dependency-type: direct:production
  update-type: version-update:semver-minor
...

Signed-off-by: dependabot[bot] <support@github.com>

ci(arch): add linux-firmware to increase test coverage

fix(systemd-sysusers): systemd.conf no longer exists

systemd.conf has been removed in systemd v250.

See https://github.com/systemd/systemd/commit/564761f

ci: reenable systemd tests for openSUSE

test(FULL-SYSTEMD): install more systemd services into test rootfs

Make the test scenario more similar to a typical usage scenario.

fix(systemd-tmpfiles): copy 20-systemd-stub.conf into the initrd

Some of the tmpfiles to be managed during initrd phase are now
described in a separate tmpfiles.d snippet, see
https://github.com/systemd/systemd/commit/408ab988dbf6723871afd3503d11bd0deb50f846

Fixes: https://github.com/dracut-ng/dracut-ng/issues/1046

ci(alpine): dhclient is no longer packaged in alpine

Resolves the following error:
dhclient (no such package):

test: skip UEFI test on architectures without support

UEFI is only supported on x86, aarch64, and riscv64 (see architecture
check in `dracut.sh`). It is not supported on s390x.

So skip TEST-12-UEFI on architectures that do not support UEFI.

Fixes: https://github.com/dracut-ng/dracut-ng/issues/976

fix(35network-manager): install nftables kernel modules needed

NetworkManager requires nf_tables, nfnetlink and nft_fwd_netdev kernel
modules to operate balance-slb bonding mode.

Fixes a6264d1726d9 ("fix(35network-manager): install nft binary during module installation")

test(ENC-RAID-LVM): simplify raid configuration

Use two (instead of three) drives for the raid to speculativly
improve the stability of this tests.
It has been randomly failing on the CI.

test(SYSTEMD): remove subtests that do not increase test coverage

Testing without an option does not really increase test coverage, if
we anyways test both with "ro" and "rw".

It is not actually tested if volatile mode is actually enabled.
Let's remove these tests steps until there is an actual assertion
for these modes.

test(test-root): include terminfo dracut module

Include an existing dracut module instead of attempting
to reimplement it.

fix(systemd): systemd dlopens libbpf

test(FULL-SYSTEMD): install more systemd services into the sysroot

Speculative fix to make the test more stable and not fail intermittently.

fix(test-root): dracut-getarg and dracut-lib are no longer used for test-root

fix(base): fallback when shell-interpreter is not included

Follow-up to e139edb

When dracut is invoked with -m and shell-interpreter is not listed,
than shell interpreter is not included.

The base module is the only module that is absolutely mandatory
(and its dependencies).

shell-intrepreter dracut module is optional - the same way e.g.
dash module is optional.

test: do not require a kernel for --clean

The make `clean` target is called during Debian/Ubuntu package build in
an environment that does not have a kernel installed. It fails to set
`VMLINUZ`.

Move the code that sets `KVERSION` and `VMLINUZ` into helper functions
and only call them in case `--clean` is not called.

ci: release Dracut quarterly

Release Dracut quarterly to synchronize the Dracut release with the
Ubuntu release. Ubuntu XX.04 has its feature freeze mid to end of
February. Ubuntu XX.10 has its feature freeze mid to end of August. So
release Dracut on the beginning of February and August to have some time
left to get it landed in the distribution.

test(NFS): reenable NFS3 testing

revert 4440acb

Removed one negative test as it does not add a lot of test coverage
and destabilizes the CI.

fix(35network-manager): install nft binary during module installation

NetworkManager has a new bonding mode called balance-slb. This mode is
used in environments where NICs are connected to switches without LACP.
In order to work, NetworkManager configures a set of nftables rules.

The 'nft' binary is required to work.

Signed-off-by: Fernando Fernandez Mancera <ffmancera@riseup.net>

fix(iscsi): do not install services when not using systemd

The iscsid and iscsiuio services are installed by an `inst_multiple` two
times. Remove installing these service files when not using systemd.

Fixes: b31f3fe0d1be ("95iscsi: Replace iscsistart with iscsid")

fix(iscsi): remove duplicate inst_multiple calls for iscsiadm and iscsid

The iscsiadm and iscsid binaries are installed by an `inst_multiple` two
times when using the systemd module. Remove the already installed
binaries from the second call.

Fixes: b31f3fe0d1be ("95iscsi: Replace iscsistart with iscsid")

fix(base): remove fallback for shell selection

This fallback is no longer needed after the introduction of
the shell-interpreter dracut module.

feat(nvmf): enable other shells (dash) not just bash

Fixes: 2f03d69f9df ("95nvmf: add module for NVMe-oF").
The module scripts for nvmf have no bashisms.

fix(iscsi): include /usr/lib/open-iscsi/startup-checks.sh if needed

On Debian/Ubuntu iscsid.service (from open-iscsi 2.1.10-1) fails to
start in the initrd, because its `ExecStartPre` script is not included
in the initrd:

```
$ grep ExecStartPre /usr/lib/systemd/system/iscsid.service
ExecStartPre=/usr/lib/open-iscsi/startup-checks.sh
```

The upstream open-iscsi project ships an `iscsid.service` [1] that does not
have an `ExecStartPre` entry, but Debian/Ubuntu uses their own service
file [2].

The TEST-70-ISCSI test will succeed on Ubuntu 25.04 (plucky) with
open-iscsi 2.1.10-1ubuntu2 (see https://launchpad.net/bugs/2072484).

[1] https://github.com/open-iscsi/open-iscsi/blob/master/etc/systemd/iscsid.service.template
[2] https://salsa.debian.org/linux-blocks-team/open-iscsi/-/blob/master/debian/iscsid.service
Fixes: https://launchpad.net/bugs/2081172

fix(shell-interpreter): move later in the module ordering

This PR ensures that shell dependencies (e.g. on bash) is
computed before shell-interpreter gets executed.

Do not explicitly depend on shell-interpreter as this would trigger
calling the shell-interpreter depend() function too
early in the model evaluation process.

The impact of this PR can be observed in the BASIC test when
running on void CI containers. Before this PR both 'dash' and
'bash' dracut modules gets included in the initrd.

After the PR only the 'bash' module gets included in the initrd.

Fixes: #860

ci: address new yamllint warnings and errors

Address all warnings and errors from yamllint except some of the
line-length warnings:

```
yamllint -d "{extends: default, rules: {line-length: {max: 203}}}"  .
```

Fixes: be7e87fbb7d7 ("feat(systemd-emergency): install rescue and emergency targets")
Fixes: fa194671663d ("ci: reenable test 70 (only on openSUSE)")

test(NFS): migrate more tests from NFSv3 to NFSv4

feat(systemd-emergency): install rescue and emergency targets

Systemd upstream natively provides emergency and rescue services.
Give an option to install them instead of dracut provided versions.

Both mkinitcpio and mkosi installs these into the initrd.

fix(plymouth): change severity of shutdown log messages

Right now, if someone is using plymouth and the "quiet" boot parameter,
odds are that they do so in the hope of a more polished boot experience.

The shutdown module prints a couple of warnings and then shuts down
plymouth, meaning that these warnings will flash briefly on screen
before the actual reboot/shutdown.

None of the warnings qualify as warnings though:

1. Printing "Unmounted /oldroot" just means that unmounting /oldroot
   (an internal implementational detail) succeeded.
2. Printing "Killing all remaining processes" hardly qualifies as a
   warning since it's a quite expected result of a reboot.

So downgrade them to "info" (which will respect the "quiet" boot
parameter), leading to a nice, quiet reboot.

ci: remove dracut modules from the ci containers that are being tested

As an example, when a module ordering gets changed, without this PR
the module would be available twice under modules.d - once with the
old order number that gets installed with the package manager and
once with the new order number that gets overlaid.

fix(docs): correct spelling mistake of recommended

Fixes: eb1ae6c4f836 ("docs: warn against the usage of -m, -o, -d")
Fixes: f6983159fa0b ("docs: warn against the usage of omit, drivers, dracutmodules")

chore: wrap long lines

test: print skip logs in V=1 or V=2 mode

In case a test is skipped, print the log in V=1 or V=2 mode to give a
hint why the test was skipped.

ci: reenable test 70 (only on openSUSE)

My gut feeling is that this test is most stable on
openSUSE with network-legacy.

test: move wildcard support from test-github.sh to test.sh

Follow-up to aa967c9 . Since this feature is only used in test.sh
let's not slow down CI runs with it.

ci(gentoo): depclean is only effective if it is one command

test: print all server startup logs in V=1 or V=2 mode

In V=0 mode only print "Waiting for the server to startup" once and do
not print anything from the server startup logs.

In V=1 and V=2 print all lines from the server startup while waiting
for the server to be ready to ease debugging (e.g. when the kernel
crashes the last 10 lines will not be enough).

test: use QEMU OUI for server MAC addresses

QEMU uses the OUI 52:54:00, but the server test cases use the OUI
52:54:01.

Change the server MAC addresses into the 52:54:00:42:00:xx range to have
them in the QEMU OUI range and also easy identifiable.

test: enable TEST 61 on fedora

This change will enable us to drive at least with one eye open :-)

ci: reenable ubuntu:rolling

ci: switch from ubuntu:rolling to ubuntu:devel

The goal is to test with latest Ubuntu before a dracut release.

fix(dracut-lib): initialize getcmdline/getarg local variables

Re-generate initrd without the systemd module with dracut 102-3.fc41:

```
dracut --omit systemd --regenerate-all --force -v
```

The resulting initrd fails to boot, and prints some errors:

```
dracut Warning: Signal caught
/lib/dracut-lib.sh: line 147: CMDLINE_PROC: unbound variable
/lib/dracut-lib.sh: line 198: _newoption: unbound variable
```

This failure can be explained when calling `getcmdline` or `getarg` with
`set -u`. Initialize the local variables.

Fixes: #997

docs: update formatting of dracut.conf man page

This updates a few things in the dracut.conf man page.

Firstly I've dedented the definition lists.  This isn't just for fun, the
indent works but becomes unwiedly when trying to use paragraphs or do things
like correctly associate admonitions, because the obvious thing of

title:
  blah
  +
  WARNING: warning

doesn't work for whatever magic parsing reasons; you have to dedent the "+".

Doing it consitently just looks neater.

I've been through and correctly added the existing admonitions so they're
associated with the definition they relate to.  I've also put things into
paragraphs where they were getting too long, which I think improves clarity.

I've made a few other minor changes to formatting, mostly adding `` around
literal things, updating the debug table, some minor wording clarity things and
using =,== for titles as I think that much better visually represents the
level.

Certainly more could be done but it's a start.

ci(gentoo): force hostonly mode as this is the config recommended by Gentoo wiki

See https://wiki.gentoo.org/wiki/Dracut.

docs: warn against the usage of omit, drivers, dracutmodules

These are common footguns. We should do a better job
warning the users against these usually untested configurations.

Follow-up to eb1ae6c .

test: do not redirect /dev/null to stdin

The test cases have comments saying "Uncomment this to debug failures",
but uncommenting `DEBUGFAIL` is not enough. The initrd will not take any
keyboard presses, because /dev/null is redirected to stdin.

To ease debugging, do not redirect /dev/null to stdin.

test: allow MAKEFLAGS override during debugging

This is a convenience feature and should have no impact on the running CI.

test(MULTINIC): fix virtio regression

Resolve regression from 0fca6f4 .

feat: default config profile

During packaging - at configure stage - allow setting
the defauflt dracut configuration from the predefined
list of of "profiles".

As an example Ubuntu packaging can call
./confgure --configprofile "generic".

test(MULTINIC): avoid /usr/bin/env in server initrd

The MULTINIC test fails to start the server on Ubuntu:

```
/usr/bin/env: 'bash': No such file or directory
[    8.026059] Kernel panic - not syncing: Attempted to kill init! exitcode=0x00007f00
```

This is caused by missing `/usr/bin/env` in the server initrd. So just
rely on bash being present in the initrd.

Fixes: 4f0a784186e5 ("chore(tests): search for bash in $PATH to improve portability")

test: fail test if server has terminated

The server might shutdown on error. When waiting for the server to
startup, check if the server QEMU process has vanished and abort the
test in that case.

test: introduce wait_for_server_startup

The code for the server startup is duplicated in multiple test cases. So
introduce a helper function to reduce code duplication.

ci: remove unnecessary workarounds