Как выключить систему

Ваша проблема в systemd:

«stopping target swap»

У разработчиков есть резон останавливать swap до выключения, чтобы освободить ФС или LVM (вдруг своп там). Поэтому просто так переписать «/etc/systemd/system/swap.target» не выйдет, у других юнитов может быть завязка на swap.target. Возможно, вам лучше активировать этот своп каким-то отдельным скриптом, а swap.target замаскировать, чтобы systemd ничего со свопом не делал.

хм, systemd-swap управляет только половиной swap устройств.

Это видно тут

[root@linux-525400114e39 ~]# systemctl list-dependencies swap.target 
swap.target
● ├─dev-zram2.swap
● └─dev-zram3.swap

Первые 2 подключаются в initrd для возможности загрузки и распаковки rootfs.

Но судя по фото выше именно они и отключаются при Stopped target Swap.

Пробежадся глазами по скрипту, которым systemd отключает swap, не увидел чего-то что бы трогало zram0 и zram1.

Завтра на свежую голову взгляну ещё раз…

Пересобрал систему выключив systemd-swap.

Проблема осталась.

При этом systemctl stop swap.target не трогает имеющиеся swap разделы и не вызывает ошибку.

А вот systemctl start umount.target приводит к той самой Out of memory. Да, чтобы запустить umount.target я заремарил параметр RefuseManualStart.

Можно подсказок как понять кто завязан на umount.target?

Сделал костыль mv /usr/bin/swapoff /usr/bin/swapoff_

И вместо swapoff скрипт-пустышку.

Теперь при poweroff systemd заходит дальше.

Reached target Power-Off

Потом вызывается oom-killer.

VM на этом этапе виснет, железные ПК идут дальше и вываливают Kernel panic - not syncing: System is deadlocked on memory

И вместо swapoff скрипт-пустышку.

Тоже вариант. Наверное, если он будет возвращать «0» (exit status), то FAILED не будет. И при желании, можно скрипт улучшить, чтобы он смотрел pid/имя родительского процесса и игнорировал только systemd, а для прочих процессов вызывал swapoff_ .

Не понятно почему происходит OOM. Вроде к этому моменту память должна быть свободной. Я не знаю как это отлаживать, по идее нужно бы посмотреть в этот момент какие процессы ещё живые и сколько памяти свободно.

Здесь https://www.freedesktop.org/software/systemd/man/systemd-halt.service.html написано, что перед halt вызываются скрипты из /usr/lib/systemd/system-shutdown/, может быть скриптом получится вывести на экран что-нибудь о состоянии памяти и т.д.

P.S. Вобще OOM должен выводить заметно больше инфы, наверное нужно поднять уровень выводимых на консоль сообщений (dmesg -n 8) или попробовать настроить netconsole.

P.P.S. У вас там делается «stop zram-config»?

вызываются скрипты из /usr/lib/systemd/system-shutdown/

Что бы я туда ни писал, безрезультатно.

Наверное, если он будет возвращать «0» (exit status), то FAILED не будет

Он и так

#!/bin/sh
exit 0

Всёравно FAILED, наверно потому что с точки зрения systemd zram устройства остались.

У вас там делается «stop zram-config»?

Если вы про то, как я управляю zram, то у меня на этапе initrd

modprobe zram num_devices=2
echo zstd > /sys/block/zram0/comp_algorithm
echo $mem_total > /sys/block/zram0/disksize
mkswap /dev/zram0
swapon -p 100 /dev/zram0
#тоже самое для zram1

Нет никаких скриптов далее это выключающих.

Поитогу я накостылил вот это:

• Подменил /usr/bin/swapoff

• Создал сервис

[Unit]
Description=Run a Bash script at shutdown
DefaultDependencies=no
Before=shutdown.target halt.target
 
[Service]
Type=oneshot
ExecStart=/usr/local/sbin/run_on_shutdown.sh
 
[Install]
WantedBy=halt.target shutdown.target

• И скрипт /usr/local/sbin/run_on_shutdown.sh:

#!/bin/bash
REBOOT=$( systemctl list-jobs | egrep -q 'reboot.target.*start' && echo "rebooting" || echo "not_rebooting" )
if [ $REBOOT = "not_rebooting" ]; then
    echo b > /proc/sysrq-trigger
fi

Теперь при poweroff оно перезагружается.

Остаётся дописать скриптик чтобы перезагрузка была перезагрузкой, а выключение выключением. И добавить sync && umount сетевых томов перед echo b > /proc/sysrq-trigger