Задача: на FTP сервер закачиваются файлы. По триггеру в incron я получаю их имена. Нужно их обрабатывать последовательно, по мере получения. Ситуация, когда предыдущий файл ещё не обработался но уже прилетел один или несколько новых - штатная. Параллельная обработка не вариант, файлы слишком большие, сервер хоть и мощный, может обрабатывать только один файл за раз. Прозреваю нужен способ организации очереди.
Вопрос: что есть из модного молодёжного, чтобы так последовательно обрабатывать файлы? В идеале нужна отказоустойчивость, чтобы очередь не терялась при каких-то нештатных ситуациях.
Смотрел ts/task-spooler ( https://www.ostechnix.com/add-linux-commands-queue-execute-one-one/), заставить это нормально работать сходу не получилось, продолжаю его вяло ковырять.
Ответ на:
комментарий
от adn
Ответ на:
комментарий
от zolden
Ответ на:
комментарий
от vel
Вы не можете добавлять комментарии в эту тему. Тема перемещена в архив.
Похожие темы
- Форум Очередь и обработка (2015)
- Форум sendmail обработка очереди (2008)
- Форум Быстрая обработка почтовой очереди (2022)
- Форум модель сообщение-очередь-обработка (2003)
- Форум Очереди задач, потоки, мультипроцессы. (2019)
- Форум очередь задач на cups (2009)
- Форум Python 3 Потоки/Очереди задач. (2019)
- Форум idoit - очередь задач под ноду (2016)
- Форум Фоновая обработка задач. Внештатные ситуации. (2012)
- Форум apache проблема: Очередь обработки скриптов php (2019)