Ядро Linux получает автоматическое тестирование : KernelCI

У ядра Linux есть одно слабое место

Единственное слабое место это кривые разрабы

В моем случае именно андроид ведет себя кошмарно.

Зачем? Он то работает. И пусть работает.

Процесс, который запущен и течет, по определению нужен! Потому что раз он течет, а его запускают и запускают, вместо того, чтобы удалить или отключить запуск, значит это прям вот очень нужен!

походи по базару, поторгуйся (с)

андроид хоть как-то себя ведет. В сравнении с тем же десктопом, который ведет себя никак, это космос.

Я, как десктоп юзер, хотел бы иметь возможность «закрепить» наиболее важные для меня процессы ( браузер целиком, страницы браузера, IDE, етц).

Закрепить в смысле запретить убийство ООМ киллером? В nohang это уже реализовано - можно скорректировать badness процесса по его имени, exe realpath, cmdline, cgroup и прочим параметрам.

И\или хотел бы получать предложение закрыть какие-то программы из списка в случае приближения ООМ апокалипсиса

Уведомления о нехватке памяти реализованы, можете что-то закрыть самостоятельно, если успеете, см демо выше.

В сравнении с десктопом андроид себя ведет ужасно. Жрущее говно, а не система. Даже страшно себе представить такого наркомана, который поставит андроид на десктоп...

Процесс, который запущен и течет, по определению нужен!

Потому что раз он течет, а его запускают и запускают

while true; do tail /dev/zero; done

- самый нужный процесс по версии ALV2. Он будет течь со скоростью гигабайты св секунду, убиваться ООМ киллером, снова запускаться, и так бесконечно.

Закрепить в смысле запретить убийство ООМ киллером? можно скорректировать badness процесса по его имени, exe realpath, cmdline, cgroup и прочим параметрам.

закрепить - это кнопочку «пин» на окошечке нажать. Еще раз - в кишочках поковыряться и гайки покрутить я могу и прямо сейчас. Где вся эта радость на уровне юзер интерфейса? Уже что только не вкрячили в эти всевозможные wm, каких только свистоперделок там нет, а за всем, что дает система, как таковая - добро пожаловать пердолиться в консоль. Я люблю консоль, но и там все можно делать по-человечески, а можно как зубы у проктолога лечить. Чтобы понять что и как нужно делать нужно смотреть сверху, от юзера, а не снизу, от ядра.

В сравнении с десктопом андроид себя ведет ужасно. Жрущее говно, а не система.

Если знаешь из каких говна и палок он слеплен, то на результат начинаешь смотреть, как на идеал.

Браузеры текут, без них нельзя обойтись, но убивать вкладки - можно. Просто это приходится делать вручную, чтобы сстема не зависла к чертям.

это приходится делать вручную, чтобы сстема не зависла к чертям

Почему ты делаешь это вручную?

Если памяти не хватает, то никакой «нормальной» обработкой эту проблему не решить.

Но свопить можно очень по-разному. Я думаю, ты знаешь это лучше меня.

Нужно или оптимизировать ПО, или добавлять память или (возможно) какими-то административными мерами исключить ситуации, приводящие к ее нехватке. А то развелось школоты.

При всей моей любви к Линуксу, иные африканские дистрибутивы при исчерпании памяти подвисают крепче Винды.

Вы еще «нормально» недостаток места на диске обработайте. Фильм-то скачался, а писать некуда, или вовсе отсутствие компьютера обработайте, факиры недоделанные...

qBittorrent отвратительно обрабатывает недостаток места на диске: в бесконечном цикле истерит всплывающими уведомлениями. А системная уведомлялка вместо того, чтобы дать истеричке по щам, терпеливо пересказывает истерику еще полчаса.

Раньше закрывал qBittorrent, убивал уведомлялку, расчищал диск, запускал обе проги заново. Теперь уведомлялка научилась сохранять очередь. ОБЕРЕЖНО ПОКРАЩЕНО.

Лучше делать хоть что-то, чем вешать всю систему.

Вот именно поэтому OOM и работает.

Ясно, пошло сдвигание темы (и нет, не работает, система висит целиком).

Потому, что я среднестатистический хомяк, накатил дефолтную убунту/$дистрибутив_нейм и не доустанавливл ничего из реп, кроме приложений для работы.

Как пример того, что прилично реализовано поверх xen для десктопа - Qubes OS. Да, я могу xen хоть где поднять, но обеспечить такой уровень интеграции это надо будет убить туеву хучу времени, с непредсказуемым результатом. Любой и каждый системный чих должен быть представлен в интерфейсе, иначе его нет. Для подавляющего большинства - нет. Пока нет софта, которые решает проблемы контейнеризации - нет никаких контейнеров, и выхлопа от системных фич, которые были до того, как появились какие-нибудь там докеры, кубернетисы, флатпаки иже с ними - тоже нет. Те полтора землекопа, которые в курсе на какие кнопки нажимать если чо - не в счет.

Логика на уровне той, что про динозавров.

Перепись лоровских кернел-хакеров объявляется открытой!

Браузеры текут, без них нельзя обойтись,
но убивать вкладки - можно.

Да пофиг на вкладки

Просто это приходится делать вручную,
чтобы сстема не зависла к чертям.

Бывает это обнаруживаешь, когда уже система в ауте, и рад бы браузер целиком грохнуть, да проще нажать резет чем что-то другое пытаться дождаться.

Раньше закрывал qBittorrent, убивал уведомлялку, расчищал диск,
запускал обе проги заново.
Теперь уведомлялка научилась сохранять очередь.

Аналогично бывает, дичь какая-то

При всей моей любви к Линуксу, иные
африканские дистрибутивы при исчерпании памяти
подвисают крепче Винды.

Плюсую, на фоне Винды за Африку обидно, пц!

Я тоже хомяк и тоже недоумеваю, я бы поставил что надо, более того, я бы даже один раз в конфигах поковырялся, если бы система, по итогу, когда остаётся последних метров 50 памяти, грохала самый толстый процесс! У меня это полюбому браузер или какая-то юзерспейсная некритичная для работы системы шняга, лучше чтобы здохла она, нежели я как залипшую наглухо, в хреновые времена, винду, буду резетить и запускать всё тоже самое, но ещё и с нуля. А так я запущу снова только то, что грохнулось.

Да всем бы такого «плохого тестирования», как ядру. Не спорю, косяков у них хватает. Но нерабочие релизы ещё не выкатывали.

То ли я совсем старый, то ли ты совсем сопляк.

Были времена когда они архивы конкретных версий с исходниками с серверов удаляли или баги были настолько критичными, что могли все данные убить.

Бомбежки регулярные.

У меня не зависает. Никогда.

Хотя нет, пару раз было. Аш через ssh приходилось заходить, чтобы прибить процессы.

Но свопить можно очень по-разному. Я думаю, ты знаешь это лучше меня.

про своп тут речь вообще не шла. своп, это хоть и тормозной, но логически совершенно чистый способ увеличить оперативную память.

В то время как ООМ даже в теории просто грязный хак, чтобы малой кровью удержать управляемость системы в заданных рамках.

При всей моей любви к Линуксу, иные африканские дистрибутивы при исчерпании памяти подвисают крепче Винды.

Нет никакого такого всеобщего линукса. Я не использую убунту и мне нет никакого дела до его проблем.

Везёт, а мне даже 1000 в oom_score_adj на процессах браузера не помогает (ну вернее один раз киллер таки сработал, но обычно висит). Помогает только запуск браузера в ограниченной cgroup-пе.

Если памяти не хватает, то никакой «нормальной» обработкой эту проблему не решить

Но в Win же смогли. А в ляликсе если не хватило — всё. Ребутайся

А в ляликсе если не хватило — всё. Ребутайся

4.2

https://github.com/rfjakob/earlyoom

даже 1000 в oom_score_adj на процессах браузера не помогает (ну вернее один раз киллер таки сработал, но обычно висит)

adj влияет на выбор процесса (если киллер пришел), но не заставляет киллера приходить раньше

И системдэ тут при том, что...?

... очень удобно без скриптования задать score ajust в юнит-файле любимого демона.

OOMScoreAdjust=
           Sets the adjustment level for the Out-Of-Memory killer for executed processes. Takes an integer between -1000 (to
           disable OOM killing for this process) and 1000 (to make killing of this process under memory pressure very
           likely). See proc.txt[2] for details.

я правильно понимаю, что без системдэ тоже самое не делается никак?

Неправильно. Без системдэ надо вручную писать искомое значение в /proc/<PID>/oom_score_adj

в смысле написать

echo 1000 > /proc/self/oom_score_adj

а с системдэ оно в юниты чем пишется, ногами?

А памяти добавить не судьба?

У меня на 8 гигах неделями висит файрфокс, поскольку ни компьютер ни файрфокс не выключается и не закрывается и работает норм.

Своп добавить. Чтобы даже когда протек, машина отвечала.

Но в Win же смогли. А в ляликсе если не хватило — всё. Ребутайся

Что там смогли? Что за система такая? В десяточке она просто висит и все. Нет, кое что они смогли. Десяточка может висеть, тупить и глючить и просто так, с кучей свободной памяти. Но мы же сейчас о другой магии вроде?

в смысле написать ... в скриптик это прям беда-беда?

Конечно же нет, пишите. Вы же требовали user-level интерфейс к управлению OOM-киллером.

Вот это же Ваше?

Приоритеты приложений нужно объявлять в юзерспейсе, но для этого кернел должен предоставлять некий интерфейс, чтобы юзерспейс мог сказать кернелу, что вот этот PID и его потомки важны, а все остальное можешь кильнуть если что.

Вам показали что он есть, этот интерфейс, а systemd несколько упрощает этот процесс.

Что Вам теперь-то не нравится?

systemd несколько упрощает этот процесс

OOMScoreAdjust=1000

vs

echo 1000 > /proc/self/oom_score_adj

Приоритеты приложений нужно объявлять в юзерспейсе, но для этого кернел должен предоставлять некий интерфейс, чтобы юзерспейс мог сказать кернелу, что вот этот PID и его потомки важны, а все остальное можешь кильнуть если что.

Системдэ не запускает приложения юзера (пока, во всяком случае). Юзер сам их запускает при помощи шелла или нажатием кнопочки. И вот для того, чтобы (пред)определять приоритеты IO, шедулинга, потребления памяти - никаких вменяемых оберток нет. Также напрочь отсутствуют простые способы обрезать аппетиты потомков, до того, как они порождены, потому что потомков без всякого спроса форкает родитель. Нет никакого вменяемого способа сказать родителю, что вот эту хрень, которую ты породишь, нужно обрезать по таким-то правилам. Нужно глазками искать порожденный процесс по каким-то признакам вычленяя его из себе подобных, ручками регулировать его аппетиты по PID. Ядро ничего не знает об «исполняемых файлах» до тех пор, пока исполняемый файл не станет процессом. Нет никакого способа заранее наложить на процесс нужные ограничения. Можно выкрутиться за счет оберточек\прокладочек, но некоторые из них ( в случае, если не мы сами управляем созданием потока\процесса) превратятся в адский костылинг.

напрочь отсутствуют простые способы обрезать аппетиты потомков, до того, как они порождены

cgroups же!

Также напрочь отсутствуют простые способы обрезать аппетиты потомков, до того, как они порождены

systemd-run --user --no-block -p MemoryMax=1G tail /dev/zero

Можно обрезать по множеству параметров. По числу процессов, по свопу и др.

да йомайо )

Аппетиты потомков наследуются, а не определяются. Как пример - браузер. Все его форки ( отдельные странички) унаследуют от родителя все привилегии\ограничения. А я хочу ограничить аппетит отдельно взятой странички. Или повысить ее привилегии. А еще лучше - заранее определить, что лорчику вот столько-то, а этой жабаскриптной жручей хрени - вот столько, и можешь ее пришибить, если у меня сейчас другое окно активно, я не обижусь.

Не бегать с выпученными глазками за каждым PIDом в надежде его усмирить, а получать предопределенное поведение.

приоритеты IO, шедулинга, потребления памяти - никаких вменяемых оберток нет

nice, ionice, systemd-run - почему они невменяемы? Как должны выглядеть вменяемые?

Аппетиты потомков наследуются, а не определяются

Аппетиты потомков ограничены контрольной группой. cgroups - это вам не limits.conf

Видимо я просто никогда не ставил себе свежайшие ядра. Сначала инета для этого не было, а потом уже проникся практической пользой lts.

именно. а теперь при создании группы индивидуально настрой какой-нибудь там порождаемый процесс. вся группа получила вот такие ограничения на IO, а вот этот конкретный процесс, который будет вот так-то форкнут - вот такие.

А я хочу ограничить аппетит отдельно взятой странички

Это уже вопрос к браузерам. Браузеры не предоставляют отличительных признаков для страниц разных сайтов.

Например, cmdline процесса хрома:

/usr/lib/chromium/chromium --type=renderer --field-trial-handle=17267941305356783109,15009856322865307400,131072 --service-pipe-token=9288020542725421415 --lang=ru --enable-offline-auto-reload --enable-offline-auto-reload-visible-only --num-raster-threads=4 --enable-main-frame-before-activation --service-request-channel-token=9288020542725421415 --renderer-client-id=53 --no-v8-untrusted-code-mitigations --shared-files=v8_context_snapshot_data:100,v8_natives_data:101

Если б строка содержала адрес сайта, который этот воркер обрабатывает, можно было б динамически перекладывать соответствующие процессы в ограниченные группы.

индивидуально настрой какой-нибудь там порождаемый процесс

Возможно чем-то подобным занималась ulatancy, динамически на лету перекладывая процессы в соответствии с правилами конфига.

Ляликсу ещё докатиться нужно до зависаний как в десяточке. В десяточке есть шанс, что Диспетчер задач таки запуститься и ты разгрузишь систему. В ляликсе если ты повис, то это конечная. Хотя раньше вроде с этим было проще или я просто реже с этим сталкивался...

Тыж сам писал в другом треде: Линукс ядро не может мягко обрабатывать ситуации с нехваткой памяти

Всё так. Проблема не в линуксе, а в сборщиках дистрибутивов, не включающих юзерспейсные обработчики в поставку по умолчанию. Ибо проблема давно решена в юзерспейсе.
Это не линукс плохой, а состав дистров по умолчанию плохой (earlyoom не включен).

Таки не включён

Не знаю, у меня вендувс 10 с 32 гб памяти тупит и зависает. В то время как в линуксе всегда можно переключится в консоль и прибить жрущий процесс. Одно время это был флеш плеер, потом файрфокс.