CI: Add systemd-nspawn boot test

OpenMandriva: Disable pam_securetty

Mageia: Disable pam_securetty

Use --volatile=overlay when booting generated_root() images

These aren't meant to be modified after being created so make sure that
writes don't fail by mounting a tmpfs overlay on top when booting.

Only require --bootable for --qemu-headless when building

OpenSUSE: Add systemd package

OpenSUSE: Simplify

Ignore mypy false positives and update to latest version

Drop --verbose flag when running dracut

Ubuntu/Debian: Simplify installation and drop some outdated workarounds

Merge pull request #510 from DaanDeMeyer/check-default

Make run() set check=True by default

Make run_workspace_command take the command as a list

Consistent with how run() takes its command.

Arch: Make pacman hooks more generic

It's generally good to not depend on specific packages in pacman hooks
since it doesn't take new packages into account. To get around, this we
can simply depend on the /usr/lib/kernel/install.d directory so any
package that installs a file into this directory can plug into the
pacman hook.

One annoyance we can't solve without package specific information in the
pacman hook is packages that themself support hook directories that
other packages can install to. This would require a mechanism in pacman
where packages can contribute triggers to hooks installed by other
packages.

Make run() set check=True by default

Interpret CLI args as nspawn args when verb == "boot"

Normal command line args are ignored by nspawn when --boot is used.
Instead of doing nothing with them, let's allow users to pass nspawn
args via the command line directly when boot is used.

Add setup-mkosi Github Action

We want to make it easy to set up mkosi based CI for other Linux
userspace projects on Github. By extracting all the tedious building of
dependencies out into a Github Actions, other projects can start using
mkosi for CI by simply adding 'uses: actions/setup-mkosi' to their
Github Actions workflow.

Revert: Make mkosi a python module and generate script via entrypoint

This commit reverts
5c9faf85fd6cc3101bbed9c506bfcce612102eae
97f22b9fada69687127c8086e9ea4ee869a33c15
0e477deeabb51e99ce4f85538b079ed8b42b250d

because the entrypoint console_script does not work properly when called with
sudo when not installed in a virtual environment, since the python binary is
unable to find the mkosi module in its search path.

Revert "Add note to README that `sudo python -m mkosi` should be used to run"

This reverts commit ba62763ad0858753fe473c43ff6705353f9ab0d0.

Add note to README that `sudo python -m mkosi` should be used to run
mkosi

Merge pull request #499 from behrmann/manpage2

Manpage and entrypoint fix

Fix entrypoint installation

Install the man page

Fix man page generation

Merge pull request #401 from behrmann/entrypoint

Use entrypoint to generate mkosi instead of symlink

Explain the installation in the README

Make mkosi a python module and generate script via entrypoint

Fix default source file transfer

According to the man page, --source-file-transfer "defaults to
copy-git-cached if a git source tree is detected, otherwise copy-all".
However the existing code only sets it to copy-git-cached if a .git
folder exists and leaves it at None otherwise, meaning a non-Git source
is never transferred.

Merge pull request #490 from DaanDeMeyer/arch-kernel-install-hooks

Unified kernel images improvements

Fedora: Capitalize rawhide in repository full name

Fedora: Fall back to fedora.gpg if key id is not in FEDORA_KEYS_MAP.

Arch: Add bootctl update pacman hook

Fix --subvolume --read-only combo

Fixes #145

Use bootctl install instead of manually copying systemd-boot to $BOOT

Arch: Drop pacstrap dependency

We have all the bits and pieces necessary to re-implement its
functionality.

Simplify grub installation

Make sure serial-getty override parent directories exist

Make warning messages yellow and simplify warn()

Collapse print_error() into die()

Add --qemu-headless to option summary

Add --without-unified-kernel-images option

Specifying this option makes mkosi install kernels with a separate
initrd and boot loader config.

Docs: Remove trailing whitespace

Arch: Drop UseSyslog from the pacman config

It clutters the log at warning level and doesn't provide much benefit.

Arch: Simplify kernel logic

Arch: Switch to dracut

Arch: Add kernel-install pacman hooks

We keep mkinitcpio disabled and replace the mkinitpcio and depmod pacman
hooks by kernel-install hooks instead.

Arch: Enable pacman colors

We use colors in the rest of mkosi so no reason to explicitly disable
them in pacman.

Arch: Drop removal of packages

Leftover from a time where base still included way too much stuff. Can
be removed now that Arch's base group is much leaner.

Regenerate unified kernel images when installing/updating kernels in
image.

This also removes --add qemu and --add-drivers squashfs from the dracut
command line as these are added by default in recent versions.

Fix btrfs EEXIST error when using cached images

Fixes #416

CentOS: Fix --mirror

Fedora: Fix --mirror

opensuse: Add binutils

Merge pull request #486 from DaanDeMeyer/ci-tdnf

Ci tdnf

Add photon to CI

We build tdnf along with the centos dependencies as it needs libsolv as
well and splitting everything up in separate steps is relatively more
complexity for a little extra run time.

We should look into caching the dependency building so we don't rebuild
the same dependencies each build.

Fix photon default release

Rename CI steps

Install zypper along with all other apt packages

Simpler build config > minimal performance win

Merge pull request #489 from DaanDeMeyer/ci-bootable

Add bootable builds to CI

Add bootable CI builds

Enable BIOS on all distros

Gracefully handle BIOS + --minimize/gpt_squashfs combo

Using grub on generated_root() images currently has problems as there is
a circular dependency between the root partition wanting to have grub
installed before being generated and grub wanting the root partition to
be generated before being installed.

It might be possible to get this working but until we do it's better to
explicitly fail when users try to do this.

Gracefully handle hybrid BIOS/UEFI images on Clear Linux

Clear Linux's bootloader clr-boot-manager supports either BIOS or UEFI
but not both.

Fail gracefully when trying to install Clear Linux on btrfs

Clear Linux does not yet support btrfs.

Only mount necessary loop device and partitions when installing bootloaders

Don't try to install systemd-boot on Clear Linux

Clear Linux has its own modified version of systemd-boot already.

Install systemd on Clear Linux

Add workspace-command debug option

Fix BIOS on OpenSUSE

Fix CentOS EPEL bootloader installation

Add plain_squashfs to output formats that cannot be booted.

Fail gracefully when trying to use btrfs on CentOS 8

Install correct grub package on openmandriva and mageia

Workaround nspawn PATH bug

See https://github.com/systemd/systemd/pull/16645

Require --merged-usr support in debootstrap.

Let's assume debootstrap is recent enough to support --merged-usr. The
option was added in 2016 so it should be widely available now.

add whitespace

ci: add openSUSE

Drop semaphore CI

Superseded by Github Actions

Merge unit-test and mypy workflows

Reduces duplication and saves us one machine usable for the main CI
workflow.

Don't depend on python3 being at /usr/bin/python3

Merge pull request #476 from DaanDeMeyer/dnf-improvements

Dnf refactoring

Add docbook-xsl to CI packages

This makes sure xsltproc doesn't go to the internet to find the
stylesheet.

Add Mageia to CI

Reduce dnf duplication

Increase default root size to 3G

1G isn't sufficient for a default ubuntu focal bootable image. Let's
up the size for a better new user experience.

We also remove the special casing for XFS since it should comfortably
fit under the 3G as well.

Merge pull request #477 from DaanDeMeyer/centos-systemd-udev

CentOS/Fedora fixes

Install systemd by default on Fedora

This makes sure a default mkosi Fedora image can be booted using nspawn.
Currently, this failes because of missing init (systemd).

Install systemd-udev on bootable CentOS images

The udev daemon and rules are split off from the main systemd package
because they aren't necessary in containers. When we're doing bootable
images, we definitely want systemd-udev to be installed.

Check if scripts are executable

Easy to forget and annoying to find out in the middle of mkosi
execution.

Remove mkosi.default from repo and add it to .gitignore

Causes more issues that it solves. Currently, one always has to be
careful to specify --default /dev/null when running in the mkosi project
directory to avoid options from the mkosi.default file taking effect.
The mkosi.default file also only works on distros with dnf. Removing it
and putting it into the .gitignore also makes it easier for developers
to put their own symlink to their distro of choice in place.

Use Ubuntu Focal in all Github Actions workflows

We also stop installing Python via setup-python as the version in
Focal should be more than recent enough.

Merge pull request #442 from DaanDeMeyer/better-interrupt-handling

Add better CTRL+C handling when running a subprocess

Delay KeyboardInterrupt() handling when running a subprocess

Because we weren't giving subprocess time to gracefully exit, we'd
often get "Device or resource is busy" errors when CTRL+C'ing mkosi
as we we'd try to unmount directories while a subprocess was still
running in it. By delaying handling of SIGINT while a subprocess is
running, the subprocess can exit gracefully which prevents EBUSY errors
from occurring when running cleanup code. To allow interrupting hanging
subprocesses, we only delay the first SIGINT we receive. If a user
presses CTRL+C again, we exit immediately as before.

Don't install bootable packages when building the build image

Require --bootable when using --qemu-headless

--qemu-headless doesn't make sense without --bootable.

Update default releases

Unify error handling

- Use single exception: MkosiException
- Throw MkosiException from die
- Print error immediately in die instead of in main exception handler.
  This makes sure the error message is written to the terminal before
  all the cleanup messages from the context managers.
- Convert some existing exceptions to MkosiException so they don't print
  a stacktrace.

CI: Run apt-get update before installing dependencies

add support for OpenMandriva Linux distribution

Merge pull request #452 from DaanDeMeyer/simplify-ci

Simplify CI

Added prepare script

Added documentation for prepare script
Added prepare script to unit tests