[loroogle] Мультипоточный WGET

aria/aria2

> Вариант с разрезанием списка закачек на несколько частей мне не нравится.
Ну и зря.

>Собственно, WGET делает это в один поток, а мне нужно в несколько.

xargs

Так и сделал в результате.

curl_multi_init

PHP в shell-скриптах? Издеваешься?

грязное решение, но если wget не позволяет нативно, то приходится искать костыли

awk-ом считаем строчки в файле, делим на 10, split.

for f in $FILES
do
    wget -b -i $f -O /dev/null
done

Как-то так. Работает же :)

нормально, только не понял почему awk-ом считаем строчки, а не cat?

файл какой то специфичный?

Файл - список урлов по одному на строку. awk потому, что только что я целый день юзал его для парсинга других логов. Знаешь, когда в руке топор и надо забить гвоздь, за молотком лень тянуться :)