chiark / gitweb /
journalctl: Add support for showing messages from a previous boot
[elogind.git] / TODO
diff --git a/TODO b/TODO
index 253b0e8cc3f9229ad10ee4d8337a240b26c4651a..f5da81f527adf78d60aa9452ebc2941fa4a02939 100644 (file)
--- a/TODO
+++ b/TODO
@@ -11,60 +11,248 @@ Bugfixes:
 
 * properly handle .mount unit state tracking when two mount points are stacked one on top of another on the exact same mount point.
 
-* add 'set -e' to scripts in test/
-* make test in test/ work with separate output dir
-
-* suppress log output on shutdown when "quiet" is used
+* stop importing kernel exported env variables. The utterly broken logic in
+  the kernel exports every kernel command line option which is not recognized
+  as a built-in module option as an env variable. Systemd should not pass-on
+  that nonsense, a kernel command line option is a command line option not an
+  env variable:
+    $ cat /proc/252/environ
+    initrd=\6a9857a393724b7a981ebb5b8495b9ea\3.10.0-2.fc20.x86_64\initrd
 
 Fedora 19:
 
-* make anaconda write timeout=0 for encrypted devices
-
-* make sure pkexec works fine with pam_systemd works fine with audit=0
-
-* create /var/log/journal/
-
 * external: maybe it is time to patch procps so that "ps" links to
   libsystemd-logind to print a pretty service name, seat name, session
   name in its output. Currently it only shows cgroup membership, but
   that's sometimes kinda hard to parse for a human.
 
 * cgroup attrs:
-  - don't unconditionally filter out duplicate settings
-  - support high-level cgroup setting syntax in systemctl. Example: "systemctl set-cgroup-attr MemoryLimit 5K"
-  - support writte string mapping even for non-high-level settings
-  - add man page for systemctl commands
-  - make sure we work fine with multi-line strings
+  - update dbus interface docs in wiki
 
-* kernel cmdline switch to turn off predictable network interface names
+* localed:
+  - localectl: support new converted x11→console keymaps
 
-* journal is not closed properly at shutdown when run in a container?
+* when installing fedora with yum --installroot /var/run is a directory, not a symlink
 
-* introduce new "journal" group in place of adm?
+CGroup Rework Completion:
 
-* localed:
-  - localectl: add listing support for X11 keymaps, by parsing /usr/share/X11/xkb/rules/xorg.lst
-  - localectl: support new converted x11→console keymaps
+* introduce "mainpid" for scopes
 
-* logind: Class property should probably know "background" or so as value for cron jobs, and the inhibition checks should filter those out too.
+* implement system-wide DefaultCPUAccounting=1 switch (and similar for blockio, memory?)
 
-* timer logic is confused by units which are skipped due to failing condition
-  http://lists.freedesktop.org/archives/systemd-devel/2013-February/008816.html
+* implement per-slice CPUFairScheduling=1 switch
+
+* handle jointly mounted controllers correctly
+
+* logind: implement session kill exceptions
+
+* make BlockIODeviceWeight=, BlockIODeviceBandwidth= runtime settable
+
+* introduce high-level settings for RT budget, swappiness
+
+* man: document new bus apis
+
+* Send SIGHUP and SIGTERM in session scopes
 
 Features:
 
-* journal-or-kmsg is currently broken? See reverted commit 4a01181e460686d8b4a543b1dfa7f77c9e3c5ab8.
+* add rpm macros for applying tmpfiles --create after package installation
 
-* remove any syslog support from log.c
+* when parsing calendar timestamps support the UTC timezone (even if we won't support arbitrary timezone specs, support UTC itself certainly makes sense), also support syntaxes such as +0200
 
-* convert /etc/bash_completion.d/ to /usr/share/bash-completion/
-  (systemd (and everything else) should install zero static data in /etc)
+* journalctl: add an output mode that looks like classic /var/log/messages, but also outputs the cursor of the last entry so that people can write scripts that can run iteratively and always process data that has been added since the last time.
 
-* tmpfiles: when traversing the tree, check for bind mount points with nametohandle()
+* when a kernel driver logs in a tight loop we should ratelimit that too.
 
-* fedora: connect the timer units of a service to the service via Also= in [Install], and maybe introduce timers.target
+* journald: optionally, when messages with a high log prioerity are logged, sync() immeidately.
 
-* fedora: F20: go timer units all the way, leave cron.daily for cron
+* introduce %v resolving to the string returned by "uname -r"
+
+* systemctl list-unit-files should list generated files (and probably with a new state "generated" for them, or so)
+
+* Get rid of systemd-sysv:
+  https://fedoraproject.org/wiki/User:Toshio/Systemd_Convert_draft
+
+* do we really need both hasprefix() and startswith()?
+
+* when a kernel driver logs in a tight loop we should ratelimit that too.
+
+* journald: when we drop syslog messages because the syslog socket is
+  full, make sure to write how many messages are lost as first thing
+  to syslog when it works again.
+
+* prohibit Restart= set with Type=oneshot
+
+* man: the documentation of Restart= currently is very misleading and suggests the tools from ExecStartPre= might get restarted.
+
+* load .d/*.conf dropins for device units
+
+* move systemctl set-log-level to systemd-analyze?
+
+* move "systemctl dump" to systemd-analyze
+
+* add a fixed dbus path for "my own unit", "my own session", ... to PID1, logind, ...
+
+* service_coldplug() appears to reinstall the wrong stop timeout watch?
+
+* transient units: allow creating auxiliary units with the same call
+
+* how to reset dynamically changed attributes sanely?
+
+* when reloading configuration, apply new cgroup configuration
+
+* journald: make sure ratelimit is actually really per-service with the new cgroup changes
+
+* libsystemd-logind: sd_session_is_active() and friends: verify
+  validity of session name before appending it to a path
+
+* gparted needs to disable auto-activation of mount units somehow, or
+  maybe we should stop doing auto-activiation of this after boot
+  entirely. https://bugzilla.gnome.org/show_bug.cgi?id=701676
+
+* when a service changes state make reflect that in the
+  RUNNING/LISTENING states of its socket
+
+* when recursively showing the cgroup hierarchy, optionally also show
+  the hierarchies of child processes
+
+* document logic of auto/noauto and fail/nofail in fstab in systemd.mount or systemd-fstab-generator man page
+
+* we should properly escape ssh hostnames we add into dbus server strings
+
+* something pulls in pcre as so dep into our daemons such as hostnamed.
+
+* cgroup-agent: downgrade error messages
+
+* document systemd-journal-flush.service properly
+
+* chane systemd-journal-flush into a service that stays around during
+  boot, and causes the journal to be moved back to /run on shutdown,
+  so that we don't keep /var busy. This needs to happen synchronously,
+  hence doing this via signals is not going to work.
+
+* allow implementation of InaccessibleDirectories=/ plus
+  ReadOnlyDirectories=... for whitelisting files for a service.
+
+* libsystemd-journal:
+  - return ECHILD as soon as somebody tries to reuse a journal object across a fork()
+
+* libsystemd-bus:
+  - default policy (allow uid == 0 and our own uid)
+  - enforce alignment of pointers passed in
+  - when kdbus doesn't take our message without memfds, try again with memfds
+  - implement translator service
+  - port systemd to new library
+  - implement busname unit type in systemd
+  - move to gvariant
+  - merge busctl into systemctl or so?
+  - synthesize sd_bus_message objects from kernel messages
+  - properly implement name registry ioctls for kdbus
+  - get rid of object hash table, use decision tree everyhwere instead?
+  - implement monitor logic
+  - object vtable logic
+  - longer term:
+    * priority queues
+    * priority inheritance
+
+* in the final killing spree, detect processes from the root directory, and
+  complain loudly if they have argv[0][0] == '@' set.
+  https://bugzilla.redhat.com/show_bug.cgi?id=961044
+
+* add an option to nspawn that uses seccomp to make socket(AF_NETLINK,
+  SOCK_RAW, NETLINK_AUDIT) fail the the appropriate error code that
+  makes the audit userspace to think auditing is not available in the
+  kernel.
+
+* Introduce a way how we can kill the main process of a service with KillSignal, but all processes with SIGKILL later on
+  https://bugzilla.redhat.com/show_bug.cgi?id=952634
+
+* maybe add a warning to the unit file parses whern the acces mode of unit files is non-sensical.
+
+* investigate endianess issues of UUID vs. GUID
+
+* dbus: when a unit failed to load (i.e. is in UNIT_ERROR state), we
+  should be able to safely try another attempt when the bus call LoadUnit() is invoked.
+
+* if pam_systemd is invoked by su from a process that is outside of a
+  any session we should probably just become a NOP, since that's
+  usually not a real user session but just some system code that just
+  needs setuid().
+
+* add a pam module that passes the hdd passphrase into the PAM stack and then expires it, for usage by gdm auto-login.
+
+* add a pam module that on password changes updates any LUKS slot where the password matches
+
+* maybe add a generator that looks for "systemd.run=" on the kernel cmdline for container usercases...
+
+* timedatctl, localectl: possibly make some commands work without the daemon, for chroot situations...
+
+* logind: add Suspend() bus calls which take timestamps to fix double suspend issues when somebody hits suspend and closes laptop quickly.
+
+* we need dynamic units
+
+* cgtop: make cgtop useful in a container
+
+* test/:
+  - add 'set -e' to scripts in test/
+  - make stuff in test/ work with separate output dir
+  - remove all the duplicated code in test/
+
+* suppress log output on shutdown when "quiet" is used
+
+* systemctl delete x.snapshot leaves no trace in logs (at least at default level).
+
+* make the coredump collector tool move itself into the user's cgroup
+  so that the coredump is properly written to the user's own journal
+  file.
+
+* seems that when we follow symlinks to units we prefer the symlink
+  destination path over /etc and /usr. We shouldn't do that. Instead
+  /etc should always override /run+/usr and also any symlink
+  destination.
+
+* remove duplicate default deps logic from fstab-generator vs. mount.c
+
+* when isolating, try to figure out a way how we implicitly can order
+  all units we stop before the isolating unit...
+
+* teach udev + logind's uaccess to somehow handle the "dead" device nodes from:
+     /lib/modules/$(uname -r)/modules.devname
+  and apply ACLs to them if they have TAG=="uaccess" in udev rules.
+
+* add ConditionArchitecture= or so
+
+* teach ConditionKernelCommandLine= globs or regexes (in order to match foobar={no,0,off})
+
+* Support SO_REUSEPORT with socket activation:
+  - Let systemd maintain a pool of servers.
+  - Use for seamless upgrades, by running the new server before stopping the
+    old.
+
+* after all byte-wise realloc() is slow, even on glibc, so i guess we
+  need manual exponential loops after all
+
+* BootLoaderSpec: drop allowing ext234 for $BOOT. Clarify that the
+  kernel has to be in $BOOT. Clarify that the boot loader should be
+  installed to the ESP. Define a way how an installer can figure out
+  whether a BLS compliant boot loader is installed.
+
+* man: remove .include documentation, and instead push people to use .d/*.conf
+
+* think about requeuing jobs when daemon-reload is issued? usecase:
+  the initrd issues a reload after fstab from the host is accessible
+  and we might want to requeue the mounts local-fs acquired through
+  that automatically.
+
+* rework specifier logic so that we can distuingish OOM errors from other errors
+
+* systemd-inhibit: make taking delay locks useful: support sending SIGINT or SIGTERM on PrepareForSleep()
+
+* journal-or-kmsg is currently broken? See reverted commit 4a01181e460686d8b4a543b1dfa7f77c9e3c5ab8.
+
+* remove any syslog support from log.c -- we probably can't do this before split-off udev is gone for good
+
+* documentation: recommend to connect the timer units of a service to the service via Also= in [Install]
 
 * add a tool that lists active timer units plus their next elapstion and the time the units ran last
 
@@ -76,22 +264,10 @@ Features:
 
 * systemctl: maybe add "systemctl add-wants" or so...
 
-* man: add a link to socket activation blog from systemd.socket(5)
-
-* systemctl status: show drop-in snippets for service files in addition to service file path themesevles.
-
 * man: add more examples to man pages
 
 * man: maybe sort directives in man pages, and take sections from --help and apply them to man too
 
-* man: systemctl: clarify that -p applies to "systemctl show" only
-
-* add "# export SYSTEMD_PAGER=" to bash login
-
-* /usr/bin/service should actually show the new command line
-
-* fedora: suggest auto-restart on failure, but not on sucess and not on coredump. also, ask people to think about changing the start limit logic. Also point people to RestartPreventExitStatus=, SuccessExitStatus=
-
 * write UI tool that pops up emergency messages from the journal as notification
 
 * think about window-manager-run-as-user-service problem: exit 0 → activate shutdown.target; exit != 0 → restart service
@@ -101,18 +277,10 @@ Features:
   name for the entries to de_DE if they aren't explicitly suffixed
   individually.
 
-* figure out what we do about hostnames/fqdn in hostnamectl/hostnamed
-
 * use "log level" rather than "log priority" everywhere
 
-* unit_name_mangle() is currently not used on "systemctl enable" and friends, only on "systemctl start"
-
-* ensure sd_journal_seek_monotonic actually works properly.
-
 * timedate: have global on/off switches for auto-time (NTP), and auto-timezone that connman can subscribe to.
 
-* support --root= in msgcatalog compiler
-
 * Honour "-" prefix for InaccessibleDirectories= and ReadOnlyDirectories= to
   suppress errors of the specified path doesn't exist
 
@@ -121,7 +289,7 @@ Features:
   so that libudev reports them as present, and systemd's .device units
   will be activated.
 
-* merge service_kill() logic into unit_kill_context() and unify the code paths
+* merge unit_kill_common() and unit_kill_context()
 
 * introduce ExecCondition= in services
 
@@ -152,9 +320,9 @@ Features:
   - logind: spawn user@..service on login
   - logind: non-local X11 server handling
   - logind: add equivalent to sd_pid_get_owner_uid() to the D-Bus API
-  - pam_systemd: try to get old session id from cgroup, if audit sessionid cannot be determined
   - pam: when leaving a session explicitly exclude the ReleaseSession() caller process from the killing spree
   - logind: GetSessionByPID() should accept 0 as PID value
+  - we should probably handle SIGTERM/SIGINT to not leave dot files around, just in case
 
 * exec: when deinitializating a tty device fix the perms and group, too, not only when initializing. Set access mode/gid to 0620/tty.
 
@@ -163,6 +331,9 @@ Features:
 * service: watchdog logic: for testing purposes allow ping, but do not require pong
 
 * journal:
+  - do not use magic msync() in src/journal/journal-file.c, just call fsync()
+      <alxchk> poettering: looks like msync just calls vfs_fsync
+      http://git.kernel.org/cgit/linux/kernel/git/torvalds/linux.git/tree/mm/msync.c#n18
   - import and delete pstore filesystem content at startup
   - journald: also get thread ID from client, plus thread name
   - journal: when waiting for journal additions in the client always sleep at least 1s or so, in order to minimize wakeups
@@ -177,29 +348,25 @@ Features:
   - check if we can make journalctl by default use --follow mode inside of less if called without args?
   - maybe add API to send pairs of iovecs via sd_journal_send
   - journal: when writing journal auto-rotate if time jumps backwards
-  - gatewayd: should run under its own UID
-  - journal: add a setgid "adm" utility to invoke from libsystemd-journal, which passes fds via STDOUT and does PK access
+  - journal: add a setgid "systemd-journal" utility to invoke from libsystemd-journal, which passes fds via STDOUT and does PK access
   - journactl: support negative filtering, i.e. FOOBAR!="waldo",
     and !FOOBAR for events without FOOBAR.
   - journal: when rotating, copy over old acls/access mode
-  - journal: document why we do not give ownership to journal files to the user that created them but use FS ACLs for that
   - journal: send out marker messages every now and then, and immediately sync with fdatasync() afterwards, in order to have hourly guaranteed syncs.
-  - journal: when we haven't written anything in a while, sync to disk and mark file as offline, in order to be more often than not in a clean state
   - journal-send.c, log.c: when the log socket is clogged, and we drop, count this and write a message about this when it gets unclogged again.
   - journal: find a way to allow dropping history early, based on priority, other rules
   - journal: When used on NFS, check payload hashes
-  - journal: When used on NFS make sure wake up sd_journal_wait() every 2s, to handle missing inotify
-  - document that people can use file system ACLs to manage access to journal files, with example
-  - Introduce journalctl -b <nr> to show journal messages of a previous boot
   - journald: check whether it is OK if the client can still modify delivered journal entries
-  - journal live copy, based on libneon (client) and libmicrohttpd
+  - journal live copy, based on libneon (client) and libmicrohttpd (server)
   - journald: add kernel cmdline option to disable ratelimiting for debug purposes
   - refuse taking lower-case variable names in sd_journal_send() and friends.
   - journald: we currently rotate only after MaxUse+MaxFilesize has been reached.
   - journal: deal nicely with byte-by-byte copied files, especially regards header
-  - journalctl: show multiline log messages sanely, expand tabs, and show all valid utf8 messages
+  - journalctl: expand tabs
   - journal: store euid in journal if it differs from uid
   - journal: sanely deal with entries which are larger than the individual file size, but where the components would fit
+  - Replace utmp, wtmp, btmp, and lastlog completely with journal
+  - Port upower to use the journal for historical power information used in future calculations
 
 * document:
   - document unit_name_mangle()
@@ -227,8 +394,6 @@ Features:
   - support "systemctl stop foobar@.service" to stop all units matching a certain template
   - Something is wrong with symlink handling of "autovt@.service" in "systemctl list-unit-files"
 
-* When shutdown.target is queued begin with an asynchronous sync()?
-
 * introduce ntp.service (or suchlike) as symlink that is used to arbitrate between various NTP implementations
 
 * deal with sendmail/postfix exclusivity
@@ -276,7 +441,6 @@ Features:
 * fedup: generator
 
 * timedated:
-  - timedated: export boolean that clarifies whether NTP is even available
   - timedated: refuse time changes when NTP is on
 
 * clean up date formatting and parsing so that all absolute/relative timestamps we format can also be parsed
@@ -301,8 +465,6 @@ Features:
 
 * currently x-systemd.timeout is lost in the initrd, since crypttab is copied into dracut, but fstab isn't
 
-* WorkingDirectory: support env var replacements like in ExecStart= so that people can use $HOME
-
 * refuse boot if /etc/machine-id is not useful (or set taint?)
 
 * nspawn:
@@ -316,16 +478,13 @@ Features:
     interfaces to the container
   - nspawn: maybe add a way to drop additional caps, in addition to add additional caps
   - nspawn: maybe explicitly reset loginuid?
-  - nspawn: move all containers to name=systemd:/containers/, and introduce externally visible names for containers
   - nspawn: make it work for dwalsh and shared /usr containers -- tmpfs mounts as command line parameters, selinux exec context
 
 * cryptsetup:
-  - cryptsetup-generator: warn if the password files are world-readable
-  - cryptsetup-generator: add RequiresMountsFor= to cryptseup service files referencing a file, similar for devices
   - cryptsetup-generator: allow specification of passwords in crypttab itself
   - move cryptsetup key caching into kernel keyctl?
     https://bugs.freedesktop.org/show_bug.cgi?id=54982
-  - when key file cannot be found, read it from kbd in cryptsetup
+  - support rd.luks.allow-discards= kernel cmdline params in cryptsetup generator
 
 * move debug shell to tty6 and make sure this doesn't break the gettys on tty6
 
@@ -353,8 +512,6 @@ Features:
 
 * explore multiple service instances per listening socket idea
 
-* testing tool for socket activation: some binary that listens on a socket and passes it on using the usual socket activation protocol to some server.
-
 * shutdown: don't read-only mount anything when running in container
 
 * MountFlags=shared acts as MountFlags=slave right now.
@@ -389,8 +546,6 @@ Features:
   - syscall filter: port to libseccomp
   - system-wide seccomp filter
 
-* systemd-analyze: data collection tools should be lightweight (few dependencies); data analysis tools can be heavyweight
-
 * .device aliases need to be implemented with the "following" logic, probably.
 
 * load-fragment: when loading a unit file via a chain of symlinks
@@ -398,14 +553,8 @@ Features:
 
 * introduce Type=pid-file
 
-* maybe allow services with ExecStop= set, but no ExecStart=?
-
 * change Requires=basic.target to RequisiteOverride=basic.target
 
-* support rd.luks.allow-discards= kernel cmdline params in cryptsetup generator
-
-* drop accountsservice's StandardOutput=syslog and Type=dbus fields
-
 * when breaking cycles drop sysv services first, then services from /run, then from /etc, then from /usr
 
 * move passno parsing to fstab generator
@@ -425,10 +574,8 @@ Features:
 
 * ExecOnFailure=/usr/bin/foo
 
-* ConditionSecurity= should learn about IMA and SMACK
-
 * udev:
-  - remove all (misguided from day 1) userspace firmware_class handling
+  - remove src/udev/udev-builtin-firmware.c (CONFIG_FW_LOADER_USER_HELPER=n)
   - move to LGPL
   - unify utf8 validator code with shared/
   - kill scsi_id
@@ -436,8 +583,6 @@ Features:
 
 * cleanup syslog 'priority' vs. 'level' wording
 
-* dbus upstream still refers to dbus.target and shouldn't
-
 * when a service has the same env var set twice we actually store it twice and return that in systemctl show -p... We should only show the last setting
 
 * support container_ttys=
@@ -452,12 +597,6 @@ Features:
 
 * default unix qlen is too small (10). bump sysctl? add sockopt?
 
-* figure out whether we should leave dbus around during shutdown
-
-* dbus: in fedora, make /var/lib/dbus/machine-id a symlink to /etc/machine-id
-
-* dbus: move dbus to early boot
-
 * save coredump in Windows/Mozilla minidump format
 
 * support crash reporting operation modes (https://live.gnome.org/GnomeOS/Design/Whiteboards/ProblemReporting)
@@ -540,8 +679,6 @@ Features:
 
 * support systemd.mask= on the kernel command line.
 
-* reuse mkdtemp namespace dirs in /tmp?
-
 * recreate systemd's D-Bus private socket file on SIGUSR2
 
 * Support --test based on current system state
@@ -567,6 +704,17 @@ Features:
 
 * drop cap bounding set in readahead and other services
 
+* systemd-python:
+   - figure out a simple way to wait for journal events in a way that
+     works with ^C
+   - add documentation to systemd.daemon
+
+* bootchart:
+   - plot per-process IO utilization
+   - group processes based on service association (cgroups)
+   - document initcall_debug
+   - kernel cmdline "bootchart" option for simplicity?
+
 External:
 
 * dbus:
@@ -592,10 +740,23 @@ External:
 
 * kernel: add device_type = "fb", "fbcon" to class "graphics"
 
-* bootchart:
-   - plot per-process IO utilization
-   - group processes based on service association (cgroups)
-   - document initcall_debug
+* drop accountsservice's StandardOutput=syslog and Type=dbus fields
+
+* dbus upstream still refers to dbus.target and shouldn't
+
+* dbus: in fedora, make /var/lib/dbus/machine-id a symlink to /etc/machine-id
+
+* add "# export SYSTEMD_PAGER=" to bash login
+
+* /usr/bin/service should actually show the new command line
+
+* fedora: suggest auto-restart on failure, but not on success and not on coredump. also, ask people to think about changing the start limit logic. Also point people to RestartPreventExitStatus=, SuccessExitStatus=
+
+* fedora: F20: go timer units all the way, leave cron.daily for cron
+
+* neither pkexec nor sudo initialize environ[] from the PAM environment?
+
+* fedora: update policy to declare access mode and ownership of unit files to root:root 0644, and add an rpmlint check for it
 
 Regularly: