[dev][bash] Скрипт скачивания с narod.ru

bash — обязательное условие?

Можно и перл, питон, etc. Просто вся сложность в регэкспе, остальное элементарно...

Кто поможет дописать одну строку? :)

#!/bin/sh

OUT=/tmp/1.html
UA="Mozilla/5.0 (X11; U; Linux i686; ru; rv:1.9.1.1) Gecko/20090719 Gentoo Firefox/3.5.1 YB/3.5.1"

if [ $# -lt 1 ]; then
	echo "USAGE: $0 FILE"
	exit 1
fi

FILE=$1


cat $FILE | while read str
do
	wget -U"$UA" "$str" -O $OUT
	# LINK= #Тут будет регексп#
	wget $LINK
	sleep 5s
done

Только заменить
wget $LINK
на
wget http://narod.ru$LINK

LINK=`grep href $OUT | awk '{ match($0, /href="(.*)"/, m); print m[1] }'`

Что-то вроде этого.

Спасибо, работает!!!
Вот финальный вариант: http://paste.org.ru/?bjlkvm

cat ~/urls.txt | while read url; do wget -c `wget -U"Mozilla YB/3.5.1" "$url" -O - 2>/dev/null | grep -o 'href="/disk/[^"]\+' | sed 's|href="|http://narod.ru|'`;done

~/urls.txt — списо урлов, которые нужно скачать =) bash+wget+grep+/dev/null ;)

Ого, круто =)

lynx -dump -listonly 'http://google.com/'

cat ~/urls.txt | while read url; do wget -c `lynx -useragent="Mozilla YB/3.5.1" -dump -listonly "$url" | grep -o 'http://narod.ru/disk/start.*'`;done

ну, вроде как профит ;)