distrowatch.com испортился

У них там ещё и UTF-8 на страницах, ужас-ужас!

Ну, как я уже говорил, lynx конвертирует на лету из любой кодировки в кодировку локали. Какая бы ни была кодировка страницы - мне он показывает в KOI8-R.

а в links2 все ок.

А где у тебя KOI8 кто?

Не распарсил. http://saahriktu.org/tmp/scr1479936023.png

Ты что, хакер? Вконтактик хакнуть мне сможешь?

Не распарсил.

ужас какой.

http://itmages.ru/image/view/5229448/f7ad6137

P. S. Links 2.12

Хакеры не ломают, хакеры программируют и не только: http://saahriktu.org/ru/hackersnotcrackers.html

Ну так я и не спорил по поводу links'а.

Зачем тебе кои8 то?

да хозпади это местный «старпёр». почитай его темы. KOI8-R хватит всем!

Это виртуал Эдика.

я не был на 100% уверен в этом.

Зачем мне что-то другое если у меня в шрифте 256 символов?

Нет, я не он. И я писал на ЛОР из ядерной консоли с локалью KOI8-R через lynx ещё до появления его на ЛОРе.

grep | sed? Ты серьёзно? Бить тебя мокрыми тряпками!

for i in dwd.xml dwp.xml; do 
curl -s http://distrowatch.com/news/$i | sed -n '/title/s/<title>\([^<]*\)<\/title>/\1/p'
done

PS: парзить (X|HT)ML при помощи RE — мне уже стыдно.

Может это и (относительно) медленно, зато просто и юниксвейно. Пайпами юниксвей не испортишь.

С тех пор многое изменилось, в частности русификация. Не ломает менять utf8, которая по умолчанию сейчас в том числе и на BSD, на кои в ручном режиме?

Пайпами юниксвей не испортишь.

Stop piping cats! ©

PS: выучи sed (awk, grep, ...) и не позорься ©

Ну, у меня есть скрипты, через которое много автоматом приходит в KOI8-R. lynx тоже всё в KOI8-R показывает, и сохраняет в KOI8-R дампы открытых страниц через 'p'.

Ну тогда напиши мне ломающую программу. Ты же хакер.

Хакер, но не крякер. Я не знаю как ломать, и, соответственно, не могу этому научить программу.

Твоя смешнявочка выросла из вполне логичного интерактива - сделал cat file, получил неожиданную портянку и поленился искать глазами, прожал ^P, дописал | grep govno. Все, кончай эту хрень про миллисекунды разбрасывать.

Умеешь строить - умеешь ломать. Иди пиши.

Вот и выросло поколение ... «почему на моём Intel i256 с 32PB рам всё тормозит?» ;)

PS: а в своё время я лялих с иксами на 486 c 8M рамы гонял (и 512k видеопамяти)...

Это мозг у тебя тормозит, старый слишком, не поспевает. Подвинься на пенсию, а то нам тут армию хипсторов на ноде с электроном в зубах сажать некуда.

нам тут армию хипсторов на ноде с электроном в зубах сажать некуда

Посади их на кол диету.

sed -n '/title/s/<title>\([^<]*\)<\/title>/\1/p'

Не сработает, если на строке с <title> есть ещё что-то помимо этого тега. Тебе нужно заматчить в pattern space всю строку, т. е. .* в начале и в конце регулярки.

Умеешь строить - умеешь ломать

Нет.

Хакируй давай, я жду.

армию хипсторов на ноде с электроном в зубах

представил эту армию. сажайте ее в биореактор, ей там самое место. из-за них веб страницы по 500мб стали в памяти занимать.

Я не крякер чтобы крякать. И тем более я не вебдевелопер. А сайты строят именно вебдевелоперы. И по Вашей логике в их кряканьи разбираются именно они. Вот и ищите вебдевелопера.

Мой сайт в этом смысле железобетонный, поскольку там просто статика.

Так ты не программист получается. Тьфу.

Угадал автора по первому абзацу.

Это виртуал Эдика.

Не похоже. Эдик хоть веселый был, а этот уныл чуть более, чем полностью

Так и запишем: «Не разрабатываешь динамические сайты - не программист».

Не сработает, если на строке с <title> есть ещё что-то помимо этого тега. Тебе нужно заматчить в pattern space всю строку, т. е. .* в начале и в конце регулярки.

На каждый чих регулярок не напасешься.

Кстати, вроде же доказано, что регулярками в принципе не возможно корректно распарсить произвольный html, даже валидный.

Да понятно это всё. Но то, что HTML не является регулярным языком, есть факт сугубо теоретический, а то, что на строке могут оказаться ещё и другие теги — вполне себе осязаемая возможность.

saahriktu
Пользуясь случаем, спрошу.
Чем мотивировано предпочтение lynx? Есть какие-то киллерфичи или это просто привычка? Тот же links поддерживает вкладки, таблицы и JS. И вроде как развивается активнее чем lynx.

Так ещё лучше:

#!/usr/bin/perl
use LWP::Simple;
use XML::Simple;

@rssxmlfiles = ('dwd.xml', 'dwp.xml');

foreach $nextxmlfile (@rssxmlfiles){
        my $url = "http://distrowatch.com/news/" . $nextxmlfile;
        my $content = get $url;
        die "Couldn't get $url" unless defined $content;
        my $xmlcontent = XMLin($content,);
        print "$xmlcontent->{channel}->{title} \n";
        for (@{$xmlcontent->{channel}{item}}) {
                print "$_->{title} \n";
        }
}

> ./distrowatchrss2.pl
DistroWatch.com: Distributions
11/23 FreeNAS 10-BETA2
11/22 Fedora 25
11/22 Clonezilla 2.5.0-5
11/20 NAS4Free 11.0.0.4
11/20 Antergos 2016.11.20
11/19 Manjaro 16.10.2
11/19 ArchBang 1116-beta "Lite"
11/19 4MLinux 21.0
11/18 LinHES 8.4.2
11/18 Zorin 12
11/18 Tails 3.0-alpha1
11/17 NethServer 7.2-rc2
DistroWatch.com: Packages
11/23 devede 4.8.5
11/23 cinnamon 3.2.2
11/22 plasma-desktop 5.8.4
11/21 lxde-common 0.99.2
11/21 VirtualBox 5.1.10
11/21 ruby 2.3.3
11/21 linux 4.8.10
11/19 avidemux 2.6.15
11/18 gtk+ 3.22.4
11/18 gnupg 2.1.16
11/18 NVIDIA 375.20
11/18 thunderbird 45.5.0

И привычен и удобен. Удобно дампить текст открытых страниц через 'p'. Вкладки и JS в links'е? Полноценной поддержки JS нет даже в elinks'е.

Вкладки и JS в links'е? Полноценной поддержки JS нет даже в elinks'е.

Пардон, попутал с elinks.

яумамыкакир детектед.

даже это:
http://rgho.st/8jpbqpjSn

лучше.

Странно, наркоман ты, а испортился distrowatch... Впрочем, он всё равно не нужен :)

Так и запишем: «Не разрабатываешь динамические сайты - не программист».

Не-программисты по определению не могут разрабатывать динамические сайты. Хотя, после того как HTML+CSS стал тьюринг-полным — всё это формальности, да.