GNU Parallel 20180922 ('Danske')

Не угадал автора новости.

Думал, что будет Саахрикту)))

Будто он хоть раз постил новости про Parallel.

Я, конечно, могу специально придумать как это поюзать, но кто, как и зачем это юзает в действительности?

Разбить stdin по строкам (комментарий)

И в комментариях к предыдущим новостям про сабж ищи кулстори.

Я. Вместо xargs Как poor man's thread pool для скриптов на баше. Вообще-то, удобно. Там даже полоска прогресса есть!!1

Пришел, чтобы похвалить Саахрикту за повышение качества новостей, а это и не он вовсе.

Конкретный кейс можешь назвать?

Вот именно!

Я был саахрикту ещё задолго до саахрикту.

Лолчто, я уже и забыл, как писал это. Ржу.

Ну ты и склеротик.

Старость не в радость.

Хорошо картинку ужали, годно.

Ну вот прямо текущий кейс.

Есть монорепа (https://github.com/helm/charts), из которой я git subtree-ом выдираю отдельные части и впиливаю в свою репу с проектом. git subtree split — это долго. А если оно выполняется десять раз — это ещё дольше. Всё это действие IO-bound, поэтому GNU parallel неплохо заходит. Мелочь, на самом деле, но удобно.

Вот: http://ix.io/1nPr/bash

('Danske')

Это в честь собаки из анимешной киберфантастики ?

https://translate.google.ru/?hl=ru&tab=wT#da/ru/danske

Doing it wrong. search://Danske+Dennou+Coil

Dansuke тогда уж.

Синк зеркал дистрибутивов.

Блин, нафига добавлять к новости какие-то картиночки, если это не скриншоты? Задолбали.

КДПВ же! ЛОР отстал всего лет на 10.

КДПВ, которую всё равно не видно на главной, потому что новость — мини? Гм...

Когда новость пишешь нельзя указать куда ты ее хочешь, это пятка модератора решает при подтверждении.

Исправления ошибок и обновления мануала.

Это уже делали в прошлом релизе.

зато он использует много ненужно.

ЖЫРНОТАААА

Хорошее название заняли. А оно точно стоит того?

Оно работает, но для GNU разработчики немного того. Кругом реклама, а кто против, для тех man parallel_alternatives.

Элемент Лени (или кто ты там), не рвись.

И ещё много раз сделают.

Например? Винду хоть не использует, и то хлеб. Хотя от него уже всего можно ожидать.

Чойта? Болд там умеренно используется.

По сравнению с произволом гноморастов это простительно.

Ну наконец-то подтвердили.

Битва с кавычками для более-менее сложных команд утомляет. Но это уже как бы поблемы баша.

Ты себе льстишь. )

Бельгия в декаметровом разрешении на июль 2018 года.

Наверное многие кейсы GNU Parallel можно выполнять с помощью xargs -P. Вот то же анзипование файлов, которое по ссылке

Я юзал некоторое время назад. Зачем — секрет.

parallel даже по ssh умеет раскидывать вычисления. Весьма удобно.

биоинформатика, обработка данных в пайплайнах

о, а расскажи про ssh поподробнее

https://www.gnu.org/software/parallel/parallel_tutorial.html#Remote-execution

Я, конечно, могу специально придумать как это поюзать, но кто, как и зачем это юзает в действительности?

Постоянно юзаю для целой кучи юзкейсов. Собственно абсолютно всё, что написано однопоточным, и при этом надо применить к куче входных данных (или файлов).

Например из часто используемого:

# Пережать все флаки в текущем каталоге с -8
ls *.flac | parallel "flac -8 {} -o __{}" && rename __ '' __*

# Оптимизировать все png в текущем каталоге
ls *.png | parallel optipng -o7 -zm6-9 -strip all

Я юзаю, когда надо определённое число http запросов отправить. Да что угодно удобно параллельить, если надо в n потоков.

Наконец-то годный анонимус подошёл. Спасибо.

Надо будет как-нибудь побороть свою лень и заюзать.
Есть необходимость, но так влом переписывать старые скрипты...

Там даже полоска прогресса есть!!1

Когда подобное ждать в системд??7

ls *.flac

ls *.png

Не делай так, это некорректно.

# Пережать все флаки в текущем каталоге с -8
parallel "flac -8 {} -o __{}" && rename __ '' __* ::: *.flac

# Оптимизировать все png в текущем каталоге
parallel optipng -o7 -zm6-9 -strip all ::: *.png

всё навернётся если будут имена с пробелами, коллега

что значит :::?

https://www.gnu.org/software/parallel/man.html#SYNOPSIS