manager: clean environment before passing it on to others

binfmt,tmpfiles,modules-load,sysctl: rework the various early-boot services that work on .d/ directories

This unifies much of the logic behind them:

- All four will now ofllow the rule that the earlier file and earlier
  assignment in the .d/ directories wins. Before, sysctl was the only
  outlier, where the later setting always won.

- All four now support getopt() and --help on the command line.

- All four can now handle specification of configuration file names on
  the command line to apply. The tools will automatically find them, and
  apply them. Previously only tmpfiles could do that. This is useful for
  %post scripts in RPMs and suchlike.

- This fixes various error path issues in conf_files_list()

core: properly validate environment data from Environment= lines in unit files

manager: validate environment parameters for SetEnvironment(), UnsetEnvironment() bus calls

bootctl: print partition uuids as /dev/disk/by-partuuid/...

core: don't accept invalid environment assignments from the kernel cmdline

tests: more tests

tests for:
 parse_boolean
 env_name_is_valid

Also convert assert to assert_se to make sure they are run even with
optimization. (see commit 9b5d6bd909855543cba75a4469bff6f82845cf0d)

logind: Allow active sessions to always shutdown by default

Currently local user are being asked for an admin  password when another
user is logged into the system. This does not make sense as the user has
the power to shut down the system anyway regardless if he/she knows the
password or not (by pulling the plug, battery or whatever).

So only require the admin authentification for remote sessions.

https://bugzilla.gnome.org/show_bug.cgi?id=693385

bootctl: add boot loader and firmware interface tool

build-sys: add -U_FORTIFY_SOURCE to $PYTHON_CFLAGS when necessary

This patch only adds one line, but moves python detection
after cflags detection, so the result of the latter can
be used in the former.

$PYTHON_CFLAGS usually includes -D_FORTIFY_SOURCE, which will generate
a warning when compiling without optimization. Avoid by undefining
_FORTIFY_SOURCE.

efi: fix returned length of efi_get_variable()

util: rework load_env_file()

Inner library calls should not invoke log_oom(), that's something for
main programs, not library calls.

Don't read through uninitialized memory if a file ends in a continuation
line.

Add comments for the non-obvious bits.

Don't choke on comment lines that are continuation lines.

Simplify some things.

path-util: fix memory leak

util: introduce FOREACH_LINE for iterating through files

test-env-replace: better user assert_se() everywhere

For test tools it's better to use assert_se() rather than assert(),
since the former is not optimized away, even if -DNDEBUG is used. That
means the test program now retains its usefulness even if -DNDEBUG is
used.

This also adds in some OOM checks, to be extra anal...

env: considerably beef up environment cleaning logic

Now, actually check if the environment variable names and values used
are valid, before accepting them. With this in place are at some places
more rigid than POSIX, and less rigid at others. For example, this code
allows lower-case environment variables (which POSIX suggests not to
use), but it will not allow non-UTF8 variable values.

All in all this should be a good middle ground of what to allow and what
not to allow as environment variables.

(This also splits out all environment related calls into env-util.[ch])

tests: add tests of strxcpyx

also fix a bad indentation in test-strbug.c

man: typo fix in systemd.socket

update TODO

vconsole-setup: don't set the kbd mode to unicode if is is currently in raw/off mode

Let's not confuse X11

shutdown: issue a sync() as soon as shutdown.target is queued

tests: add test of strbuf

logind: rename "seat-master" tag to "master-of-seat"

We currently enforce that seats are to be named in the form of
"seatXXX", i.e. need to begin with the 4 characters "seat". Thus,
"seat-master" would qualify as a seat name. As seat names are frequently
used as tags on devices, the "seat-master" tag might hence confuse
logind if the user decides to name a seat "seat-master".

Hence, avoid any ambuigity: let's rename the "seat-master" tag to
"master-of-seat".

update TODO

man: fix prototype of sd_get_uids()

update TODO

build-sys: link libudev against the internal sd-daemon lib, not the source file

udev: udevadm hwdb - add --root=

https://bugs.freedesktop.org/show_bug.cgi?id=60398

shared: conf-files - use root parameter and convert to auto-cleanup

shared: conf-files - add root parameter

systemd: fix uninitialized memory access in selinux

==6129== Syscall param socketcall.getsockopt(optlen) points to uninitialised byte(s)
==6129== at 0x312D0F325A: getsockopt (syscall-template.S:81)
==6129== by 0x4615E6: get_audit_data (selinux-access.c:268)
==6129== by 0x461A81: selinux_access_check (selinux-access.c:394)
==6129== by 0x453B23: bus_manager_message_handler (dbus-manager.c:1395)
==6129== by 0x313581D9C4: _dbus_object_tree_dispatch_and_unlock (dbus-object-tree.c:862)
==6129== by 0x313580FC1F: dbus_connection_dispatch (dbus-connection.c:4672)
==6129== by 0x44CD4C: bus_dispatch (dbus.c:528)
==6129== by 0x41292F: manager_loop (manager.c:1573)
==6129== by 0x40CD8E: main (main.c:1735)
==6129== Address 0x7fefff2c0 is on thread 1's stack

tests: add more tests

Adds tests of:
 strv_env_delete
 strv_env_unset
 strv_env_set

build-sys: fix build without -Wl,--gc-sections

In 8d81eb8e the new library was added for libudev, use it for
libsystemd-journal too.

udev: remove HWDB_BIN

test-env-replace: assert results instead of printing them

Also code cleanup and split into functions in preparation for more tests
to come.

build-sys: at least for now, never link libudev against systemd's shared libraries

build-sys: add libsystemd-id128 as libudev dependency

After d848b9cbfa0 'Move generic specifier functions to shared' libudev
depends (through) libsystemd-shared.la on libsystemd-id128.so.  The
problem only appears when the linker does not support --gc-sections
and manifests itself as the inability to resolve sd_id128_get_machine
and other libsystemd-id128 functions, which aren't really used.

build-sys: restore man/index.html as link to systemd.index.html

It got lost in the transformation to XML generation.

man: fix return value for sd_journal_flush_matches

https://bugs.freedesktop.org/show_bug.cgi?id=60133

man: document COREDUMP_UNIT and COREDUMP_USER_UNIT

Also fix formatting for kernel related fields, enabling them
to show up in the directives index.

coredump: make use of the cleanup macros

logs-show: show messages for all unit types in systemctl status

I can't find a reason why we shouldn't try to output messages for other
unit types than .service, .socket, .mount and .swap as well. It's probably
a leftover from before we started logging UNIT= from inside PID 1.

journal: log user units for coredumps and show them in systemctl status

nss-myhostname: copy first result to preallocated buffer

Fixes a segfault in nscd when using nss-myhostname.

Nscd expects that an NSS module's gethostbyname4_r function returns
its first result in the pre-allocated gaih_addrtuple denoted by **pat.
(See nscd/aicache.c in the Glibc sources.)  However, nss-myhostname
doesn't fill in **pat but allocates the first result in ‘buffer’, then
sets *pat.  So nscd crashes (e.g. when running ‘getent ahosts
my-machine’).

Hard to tell if this is a bug in nscd, since there doesn't seem to be
a proper API spec for gethostbyname4_r.  But in any case, this patch
fixes the crash by copying the first result to **pat.

man: describe unit load path in systemd.unit(5)

In other cases where multiple directories are searched for unit files,
the list of directories is described in the man page describing the
format. I think this makes sense too in case of systemd directories,
since the systemd(1) manpage already has an overview of many different
topics.

build-sys: substitute strings in systemd.unit(5)

Makefile.am is updated to deal with .xml.in sources.  Nothing in the
output is really changed yet, this is just preparation.

systemd: raise level of message about lookup paths

This can be pretty important for the user, and is not trivial
to figure out in all cases.

Also show failing path in error messages.

shared: remove now unused function

systemd: do not remove empty paths from unit lookup path

The ability to start a new unit with 'systemctl start ...' should not
depend on whether there are other units in the directory. Previously,
an additional 'systemctl daemon-reload' would be necessary to tell
systemd to update the list of unit lookup paths.

build-sys: create Makefile-man.am automatically

man rules were repeating the same information in too many places,
which was error prone. Those rules can be easily generated from .xml
files. For efficiency and because python is not a required dependency,
Makefile-man.am is only regenerated when requested with

  make update-man-list

If no metadata in man/*.xml changed, this file should not change. So
only when a new man page or a new alias is added, this file should
show up in 'git diff'. The change should then be committed.

If the support for building from git without python was dropped, we
could drop Makefile-man.am from version control. This would also
increase the partial build time (since more stuff would be rebuild
whenever sources in man/*.xml would be modified), so it would probably
wouldn't be worth it.

build-sys: split man alias rules into separate file

There shouldn't be any functional change. This is an 'automake include',
so the generated Makefile is the same (apart from ordering).

build-sys: replace one last mkdir hook with list item

Previously, errors would be ignored. Now they are not. But I don't see
how we could fail to create the directory, so I don't think that it
matters.

man: see also dracut(7) in bootup(7)

tests: skip tests if manager cannot be created

When running without a user session, tests fail.

tests: move strv_parse_nulstr to test-strv, and actually test it

The test was originally added with this commit message:
"ask-password: supported plymouth cached passwords"

strv: add strv_print

Clearer, and spares the temp variable.

tests: run manager in session mode

False positives pop up otherwise.

FAIL: test-unit-name (exit: 134)
================================

Failed to open /dev/tty0: Permission denied
Failed to create root cgroup hierarchy: Permission denied
Assertion 'manager_new(SYSTEMD_SYSTEM, &m) == 0' failed at src/test/test-unit-name.c:125, function test_unit_printf(). Aborting.

test: add a few tests and tidy up

adds test of:
strv_find
strv_find_prefix
strv_overlap
strv_sort
streq_ptr
first_word

Splits tests of util.c into own file to avoid clutter as we add more.

Removed a few prints and uses _cleanup_free_ to make the tests more focused.

man: remove boot up runlevel support

As of 3cdebc217c42c8529086f2965319b6a48eaaeabe support for
distro specific boot up runlevels has been dropped.

update TODO

update TODO

hwdb: update

TODO: update

cryptsetup: accept both "read-only" and "readonly" spellings

Mukund Sivaraman pointed out that cryptsetup(5) mentions the "read-only"
option, while the code understands "readonly".

We could just fix the manpage, but for consistency in naming of
multi-word options it would be prettier to have "read-only". So let's
accept both spellings.

BZ: https://bugzilla.redhat.com/show_bug.cgi?id=903463

test-strv.c: test strv_join added

test-strv.c: Split tests into seperate functions

test-strv.c: Leaves main clean for additional tests

systemctl: Fix wrong assertion test

build-sys: fix empty lines

build-sys: move HAVE_MICROHTTPD HAVE_MYHOSTNAME to their own sections

build-sys: move most of HAVE_KMOD into one section

build-sys: add intermediate files to CLEANFILES to fix distcheck

man: time - exchange some 'colons' with 'commas'

build-sys: add rules for sd_journal_{get,set}_data_threshold(3)

Fixup for 350b6a65.

Add a few entries to .mailmap

build-sys: inline two definitions which were only used in one place

build-sys: keep intermediate files

Sometimes it is useful to look at them, and they don't take
up any significant amount of space. Keeping them also avoids
the message about files being removed at the end of make
run.

test: some trivial fixes to test scripts

- fix typo
- use compiled systemd-nspawn
- drop --capability=... from systemd-nspawn invocation, is is the default now
- simplify sudo make invocations

tests: add test for unit name printing

tests: compress unit name tests and add more asserts

tests: add test for install_full_printf()

install: allow %u an and %U specifiers in WantedBy/RequiredBy/Alias

install: allow specifiers in WantedBy/RequiredBy/Alias

This allows one templated unit to refer to another templated unit
at installation time.

Examples:

> grep WantedBy ~/.config/systemd/user/mpop@.timer
WantedBy=services@%i.target

> srv disable mpop@iit.timer
rm '/home/alxchk/.config/systemd/user/services@iit.target.wants/mpop@iit.timer'
> srv enable mpop@iit.timer
ln -s '/home/alxchk/.config/systemd/user/mpop@.timer' '/home/alxchk/.config/systemd/user/services@iit.target.wants/mpop@iit.timer'

Based-on-patch-by: Oleksii Shevchuk <alxchk@gmail.com>

core: fix %U when no User= used

When the username was not explicitly specified, both %U and %u would
print the username. Make %U always print UID.

Move generic specifier functions to shared

No functional change. This makes it possible to use them in install.c.

install: automatic cleanup using local cleanup functions

install: use automatic cleanup in find_symlinks_fd()

shared: introduce _cleanup_set_free_free_

Clarify sentence

man: grammar fix

journalctl: allow --lines=0 i.e. only new

Makes it easier to watch just for new entries. Once scenario
is where the user starts 'journalctl -qfn0' to watch for changes
during some operation.

TODO

man: mention pacman at the top of the nspawn man page, too

update TODO

keymap: Add HP HDX 9494NR: Fix touchpad keys

Previous commit had them the wrong way around.

https://bugzilla.redhat.com/show_bug.cgi?id=757928

keymap: Add HP HDX 9494NR

Add touchpad and www keys.

https://bugzilla.redhat.com/show_bug.cgi?id=757928

keymap: Add support for the brower hotkey on the HP ProBook

https://bugs.launchpad.net/bugs/1105191

man: add Arch Linux entry to systemd-nspawn(5)

Archlinux has a similar tool to debbotstrap in the arch-install-scripts
package that will install to a specified directory. This is generally
used for installation, so the -d flag must be passed to tell it to
install to a non-mountpoint directory.

build-sys: install two more man aliases

logind: add MESSAGE_IDs to interesting events

update .gitignore