ionice не работает

на графике видно скачек в момент выполнения скрипта https://prnt.sc/judiy3
Желтый цвет это CPU iowait

Процесс, имеющий класс idle, сможет получить доступ к диску только тогда, когда другие программы не хотят к нему обращаться

Это не спасает, когда проблемы, например, в генетике ФС :) Процесс ждёт, пока диск освободится, система начинает работу с диском и отбирает диск, пока не закончит. А закончить она в запущенных случаях может не скоро.

Я уже писал в параллельном топике, что такие особенности, например, у ext4 со множеством файлов на фрагментированном разделе.

Как тогда TAR работает? Он напрягает до 90%, но сервер не виснет

Как тогда TAR работает?

С удалением пофайлово или просто запаковка?

tar наверное все файлики подряд читает, а удаляешь ты то тут один, то там другой?

Есть ещё один часто не очевидный момент: ionice работает корректно в паре с CFQ планировщиком. Иногда отсутсвие эффекта от ionice говорит лишь о том, что на сервере используется другой планировщик, к примеру deadline, который игнорит любые приоритеты)

Запаковка без сжатия

Да, удаляю в разных папках

Деб 9, какой там? Есть какое то решение удалять эти гребаные файлы, что бы сервер раком не вставал? )

Поставить ssd уже предлагали?

cgroups

Ну и bfq ещё.

В Debian 9 по умолчанию из коробки юзается CFQ, с ним ionice должен работать как требуется, если с ним проблемы и возникают, то из-за особенностей некоторых ФС, упомянутых KRoN73.

Но на всякий случай, если вы не уверены насчёт того, какой планировщик у вас юзается, можете проверить, у меня к примеру так

cat /sys/block/sda/queue/scheduler
noop deadline cfq [bfq-sq]

Используемый, это тот что в квадратных скобках.

Ну можно еще кластер за 100000$ купить

из коробки юзается CFQ, с ним ionice должен работать как требуется

Он перестал быть волшебной пулей лет 7-9 назад :)

А когда-то это было реально какое-то чудо:

CFQ IO Schedule и /proc/sys/... Или как уменьшить тормоза при интенсивной работе с диском

Блин, было время, когда системы на HDD (при чём это касается и Linux, и Windows) с холода летали на порядок лучше, плавнее, отзывчивее, чем сегодня с HDD.

Вот, только обрывки остались таких демок (хотя они не передают офигенную плавность GUI того времени):

https://youtu.be/1iKhZzzBjlI

затыкается через каждые 20-30 сек

Это не похоже на твои настройки dirty_expire_centisecs ?

Вообще, из того, что ты написал, трудно догадаться о причинах явления, но на всякий случай попробуй вот это средство: nocache (теперь уже есть и в репах некоторых дистров), если будет эффект - отпишись.