test: run the custom check hooks before common checks

since we delete the guest journals as part of the save_journal() step in
check_result_common(), making journal inaccessible from the custom check
hooks.

test: pass the initdir to check_result_{qemu,nspawn} hooks

test: fix a couple of issues found by shellcheck

test: don't flush debug logs to the console

Let's keep the debug logs in the journal, while logging only
testsute-*.sh stdout/stderr to the console (ba7abf7). This should make
the test output log a bit more readable and potentially the tests itself
a bit faster by avoiding console oversaturation.

Also, it should significantly reduce the size of artifacts kept by CIs.

test: always wrap useradd/userdel when running w/ ASan

since they dlopen() PAM modules, including systemd ones.

test: make the busy loop in TEST-02 less verbose

as it unnecessarily clogs the logs.

meson: Reorder cflags for sd-boot

Currently, -Wall and -Wextra override previously passed flags like
-Wno-unused-parameter. This reorders them to be passed before any
optional flags. -Wsign-compare is part of -Wextra and therefore dropped.
-nostdlib is a link-stage flag and dropped as it is already part of
efi_ldflags.

test: send stdout/stderr of testsuite units to journal & console

to make debugging in CIs slightly easier.

Merge pull request #23741 from mrc0mmand/more-asan-tweaks

test: wrap certain uninstrumented binaries to make them work w/ ASan

nspawn: fix UID map string

We send/recv the set of payload uid, host uid, payload gid, host gid.
Hence, the index must be incremented with 4, instead of 2.

Fixes #23664.

RFC 6762 section 7.1: a Multicast DNS querier SHOULD NOT include records in the
Known-Answer list whose remaining TTL is less than half of their original TTL

resolve: mark mDNS RRs in the Additional Records section as cacheable

RFC 6762 does not restrict caching of records in the Additional section.
Caching can improve resolve efficiency.

test: don't wrap binaries built with ASan

since they should handle loading other instrumented libraries without
issues.

test: drop all LD_PRELOAD-related ASan workarounds

since they shouldn't be necessary anymore, as we tweak the "problematic"
binaries on per-binary basis.

test: wrap binaries using systemd DSOs when running w/ ASan

Let's detect & wrap binaries which are linked against systemd DSOs and
we're running under ASan, since otherwise running such binaries ends
with:

```
==633==ASan runtime does not come first in initial library list; you should either link runtime to your application or manually preload it with LD_PRELOAD.
```

tree-wide: fix typo

Merge pull request #23733 from sshedi/cid-1469711

homework: initialize we_detached

Merge pull request #23709 from yuwata/test-hostname-locale

test: import hostname and locale tests from debian/ubuntu test suite

Revert "test: fix TEST-70 under sanitizers"

This reverts commit 47d81bc61315bae917276f978f39f200cf31e106.

man: Add some punctuation; remove double spaces.

sd-journal: check retval of sd_id128_from_string call

Fixes: CID#1469712

CID 1469712 (#1 of 1): Unused value (UNUSED_VALUE)
returned_value: Assigning value from sd_id128_from_string(word + 2, &boot_id) to r here,
but that stored value is overwritten before it can be used.

homework: initialize we_detached

Fixes: CID#1469711

CID 1469711 (#1 of 1): Uninitialized scalar variable (UNINIT)
14. uninit_use: Using uninitialized value we_detached.

test: use trap RETURN

test: move "do" at the end of line

test: insert space in for loop

test: import localed tests from debian/ubuntu test suite

test: install C.UTF-8 and English locales

test: install libxkbcommon and x11 keymaps

test: introduce inst_recursive() helper function

test: add one more path to search keymaps

Now it also supports split-usr.

localectl: use Table to show status

locale: rename keymap-util.[ch] -> localed-util.[ch]

As the file contains not only keymap related functions.

locale-setup: merge locale handling in PID1 and localed

locale-util: align locale entries

locale-util: check if enumerated locales are valid

locale-util: fix memleak on failure

test: import hostnamed tests from debian/ubuntu test suite

test: support debian/ubuntu specific timezone config file

test: drop unnecessary --no-pager option

test: introduce assert_not_in() helper function

This also silence assertions, and replace grep with bash's regular
expression match.

pstore: Run after modules are loaded

The systemd-pstore service takes pstore files on boot and transfers them
to disk. It only does it once on boot and only if it finds any. The typical
location of the pstore on modern systems is the UEFI variable store.

Most distributions ship with CONFIG_EFI_VARS_PSTORE=m. That means, the
UEFI variable store is only available on boot after the respective module
is loaded.

In most situations, the pstore service gets loaded before the UEFI pstore,
so we don't get to transfer logs. Instead, they accumulate, filling up the
pstore over time, potentially breaking the UEFI variable store.

Let's add a service dependency on any kernel module that can provide a
pstore to ensure we only scan for pstate after we can actually see pstate.

I have seen live occurences of systems breaking because we did not erase
the pstates and ran out of UEFI nvram space.

Fixes https://github.com/systemd/systemd/issues/18540

hwdb: analyzers: remove generic "STM Device in DFU Mode"

The USB ID v0483pDF11 is used by the ROM code in many STMicroelectronics
devices (for firmware download) and not just signal analyzers.

sysctl: increase log severity on failed write

Increase the log severity in case of writing to a non existent sysctl
parameter as this can either be caused by a misspelling or a kernel mis-
configuration, e.g. in case YAMA does not get loaded due to a incomplete
lsm= override:

    systemd-sysctl[354]: Couldn't write '1' to 'kernel/yama/ptrace_scope', ignoring: No such file or directory

po: Translated using Weblate (Estonian)

Currently translated at 70.8% (134 of 189 strings)

Co-authored-by: H A <contact+fedora@hen.ee>
Translate-URL: https://translate.fedoraproject.org/projects/systemd/master/et/
Translation: systemd/main

network: l2tp: initialize a to NULL

Fixes: CID#1475788

Merge pull request #23707 from yuwata/dns_service_split

dns-domain: fix buffer-overflow

Merge pull request #23714 from mrc0mmand/networkd-testsuite-tweaks

A couple of assorted tweaks for the systemd-networkd test suite

meson: add build targets for libudev, libsystemd and pkg-config

Mirror install tags with the same names and content

po: Translated using Weblate (Estonian)

Currently translated at 69.8% (132 of 189 strings)

Co-authored-by: H A <contact+fedora@hen.ee>
Translate-URL: https://translate.fedoraproject.org/projects/systemd/master/et/
Translation: systemd/main

test-network: drop unnecessary `global`

`global` is needed only when assigning a new value to the global
variable; it's not necessary when modifying a mutable object (in our
case we just append items to the global list).

test-network: explicitly set encoding when open()ing text files

test-network: make use of f-strings in couple more places

test-network: override networkctl bin w/ valgrind/sanitizers

Merge pull request #23708 from yuwata/update-kernel-headers

Update kernel headers

shared/linux: update kernel headers to 5.19-rc1

basic/linux: update kernel headers to 5.19-rc1

dns-domain: reduce indentation in dns_service_split()

dns-domain: rename function arguments

dns-domain: make each label nul-terminated

dns_label_unescape() does not nul-terminate the buffer if it does not
have enough space. Hence, if a lable is enough long, then strjoin()
triggers buffer-overflow.

Fixes #23705.

Merge pull request #23691 from medhefgo/efi-clang

efi: Add parse_number8/16

systemctl: add `edit` verb to arguments' help text

The arguments `--global`, `--runtime` and `--root` also affect the
`edit` verb.

Merge pull request #23701 from medhefgo/boot-mem

boot: Use memcpy/memset provided by firmware

boot: use efi_memcpy inplace of memcpy

`efi_memcpy` does some validations before referencing pointers, it is
the safer option for this case.

Fixes: CID#1489876

shared/condition: accept size suffixes for ConditionMemory

Fixes #23697.

Merge pull request #23687 from yuwata/dns-domain-trivial-cleanups

dns-domain: trivial cleanups

Merge pull request #23584 from yuwata/test-login

test: import logind test from debian/ubuntu test suite

Merge pull request #23690 from yuwata/test-sd-device

test: several tweaks for test-sd-device

boot: Use memcpy/memset provided by firmware

These are significantly faster and safe us from rolling our own
optimized versions.

boot: Mark memcmp/memcpy/memset aliases as used

The compiler may emit calls to these but also optimize the function away
somehow, breaking at link stage. Marking them as used prevents this.

docs/CONTRIBUTING: ask people to send a ping on stalled reviews

A few related changes: be explicit that 'main' is the branch we're referring
to. There was a case recently of somebody rebasing on 'master' by mistake.
It's better to be explicit, since 'main' is still not the default for git
(AFAIK).

Also, github seems to send mails about force-pushes, so drop that as a
justification. Commenting about changes that were done is useful even if
github were to send a notification.

And finally, $subject. We do that ourselves, but outside contributors might not
know that that's expected.

efi-string: Remove one more |= for bool

This one was missed in #23589.

Merge pull request #23683 from keszybz/status-format

Default to default-status-unit-format=name in developer mode

meson: add experimental bpf-gcc compiler support

Not fully working but should make it easier to clean up remaining
issues.

Merge pull request #23689 from yuwata/test-timedate

test: import timedated test from debian/ubuntu test suite

docs: desaturate dark-mode background color

The documentations dark-mode background color as
added in #23417 was perceived to be too purple-y [1]
and is therefore replaced by a desaturated black
that is derived from the systemd brand-black using
12% less HSL saturation.

[1] https://github.com/systemd/systemd/pull/23417#issuecomment-1146323820

meson: use status-unit-format-default=name in developer mode

I think developers are particularly unlikely to find the descriptions
useful, and would benefit from being able to copy&paste unit names.
Let's make this choice automatically.

meson: add status unit format to summary

boot: Use parse_number16 for boot counter parsing

boot: Drop use of Atoi

boot: Add parse_number8/16

Merge pull request #23688 from yuwata/boot-efi-string-efi_fnmatch-fix-over-flow

boot/efi-string: check the end of haystack before testing remaining pattern

test: exclude network interfaces

After https://github.com/systemd/systemd-centos-ci/pull/492 is merged,
the networkd test may be running when test-sd-device is invoked.
Let's exclude net subsystem.

test: import timedated test from debian/ubuntu test suite

test: import logind test from debian/ubuntu test suite

test: always exclude devices named loop*

Not only block subsystem, but also misc has device named "loop*", and
the test always said that the following device is newly found:
---
/* test_sd_device_enumerator_filter_subsystem */
New device found: subsystem:misc syspath:/sys/devices/virtual/misc/loop-control
1 new devices are found in re-scan
---

test: drop redundant IMAGE_NAME=

If it is not specified, then "default" will be used.

boot/efi-string: check the end of haystack before testing remaining pattern

Fixes buffer-overflow reported at https://github.com/systemd/systemd/pull/23589#issuecomment-1151820341.

devnode-acl: use set_put_strdup_full() and set_ensure_consume()

dns-domain: simplify code a bit

dns-domain: use dns_name_concat()

`dns_name_normalize()` is an alias of `dns_name_concat()`.
For consistency with `dns_name_is_valid_ldh()`, let's use
`dns_name_concat()`.

Merge pull request #23589 from medhefgo/efi-clang

boot: Drop use of several gnu-efi functions

fix: sd_id128_get_invocation now works for user services

tree-wide: fix typo

po: Translated using Weblate (Estonian)

Currently translated at 18.5% (35 of 189 strings)

Co-authored-by: H A <contact+fedora@hen.ee>
Translate-URL: https://translate.fedoraproject.org/projects/systemd/master/et/
Translation: systemd/main

test: account for ADDR_NO_RANDOMIZE if it's set

On ppc64le sanitizers disable ASLR (i.e. by setting ADDR_NO_RANDOMIZE),
which opinionated_personality() doesn't return. Let's tweak the current
personality ourselves in such cases.

See: https://github.com/llvm/llvm-project/commit/78f7a6eaa601bfdd6ae70ffd3da2254c21ff77f9

Resolves: #23666

Merge pull request #23348 from medhefgo/log-shutdown-blockers

shutdown: Log processes that block umount

Merge pull request #23658 from keszybz/gcc-warnings-2

Fixes for NULL-pointer arguments based on gcc warnings

bpf: use __always_inline macro in restrict-ifaces.bpf.c

This appears to be more reliable at inlining with some compilers.

meson: Build with frame pointers in developer mode

Profiling tools tend to work better when binaries and libraries
are compiled with frame pointers as without them there's no easy
and fast way to get the current stacktrace.

shutdown: Lazy unmount /oldroot/{dev,proc,sys}

These should not prevent us from cleaning up the remainders of /oldroot
if something in the kernel is blocking these from being unmounted.