Что сегодня есть чтобы скачать сайт?

wget

Слышал, что Kiwix обрабатывает mediawiki.

Сам его использовал только минут 5 до того, как понял что там нет нужного мне ресурса. Но желаю удачи в поисках!

А как с его помощью качать весь сайт?

Не помню точно, но это первый результат гугла по запросу «wget скачать сайт».

Кстати да, упомянутый kiwix — хороший инструмент для просмотра wiki в офлайне. Но как для него сделать zim архив из вебсайта… Гуглится zimit

https://github.com/ballerburg9005/wget-2-zim

https://wiki.openzim.org/wiki/Build_your_ZIM_file

Действительно ли нужен сайт целиком?

Зная, что информация из Интернета часто пропадает без следа (изредка сохраняется в web archive, но по нему почти бесполезно искать), сохраняю важные статьи индивидуально. Использую для этого пару расширений Firefox: SingleFile и MarkDownload.

Раньше для Firefox существовали расширения, скачивающие сайты целиком (назывался, кажется, ScrapBook), но со временем, я понял, что скачивать сайты целиком в большинстве случаев напрасная трата времени и места на диске. Чаще всего нужна одна страница или даже вырезка, которую сохраняю в org-mode или ещё куда-нибудь.

Представить целый сайт с нужной информацией… Ну разве что Arch Wiki.

Возможно такой список софта подойдёт, колонка Browse
https://docs.google.com/spreadsheets/d/1FqxwaZnIhhQ7jDCC-W64NMRf5rDeh2Shx3u01MsBmTQ/

Или свяжитесь с web.archive.org если у них ещё нет этого сайта в базе.

У mediawiki в левой колонке (или может ещё где-то) часто есть штатная ссылка на скачивание дампа. Потом поднимаешь свою и заливаешь.

целый сайт с нужной информацией

это и есть определение справочной литературы, включая энциклопедии, словари, справочники, перечни. Когда отрасль известна, а какая именно тема всплывёт в неожиданный момент - невозможно предсказать.

mwscrape, и если зайдет именно формат slob, то mw2slob. Экспорт XML естественно лучший вариант, но на публичных вики он обычно отключён.

Ну а самой массовой вариант - как уже указывали - формат ZIM и читалка Kiwix.

Что сегодня есть чтобы скачать сайт?

Весь сайт можно загрузить с помощью HTTraQt (Qt-версия HTTrack) или WinHTTrack (WinAPI-версия HTTrack).

Как его адекватно скачать чтобы локально можно было использовать?

главное чтобы работали кросс-ссылки и можно было смотреть изображения

Расширение для интернет-браузеров SingleFile (есть версии для Chrome/Chromium based и Firefox/Firefox based) позволяет скачать страницу со всеми изображениями в один html-файл.

К диетологу.

https://github.com/lahwaacz/arch-wiki-docs

там как раз для выкачивания медиавики

у неё есть апи, я когда-то писал сильно более тупой скрипт на баше

сохраняю важные статьи индивидуально

В этом и проблема, там несколько сотен страниц.

Pale Moon с расширением Scrapbook X.

Тема - камень 1975го года, там не будет ничего нового.

Вот,нашел один из вариантов: wget -r -k -l 7 -p -E -nc http://site.com/

HTTrack раньше пользовался, удивлён, что давно не обновляется

Действительно ли нужен сайт целиком?

Не так давно админ доброчана (палюсь, да) сделал простую и мерзкую вещь: погасил сервер и свалил. В итоге треды и общение людей за более чем 10 лет исчезли полностью.

httrack?

Не знаю, что такое доброчан. На web archive копий не осталось?

Чем так ценны эти треды?

Просто, например, в том же «устаревшем» ЖЖ были и есть десятки тысяч супер-интересных блогов от очень интересных людей (среди десятков миллионов менее интересных). И в каментах там иногда были и до сих пор встречаются очень интересные дискуссии.

Будет очень жалко, если когда-нибудь это исчезнет (я вот свой блог когда-то сам удалил не сделав резервную копию, сейчас об этом жалею).

Но скачать всё это к себе? Нереально, и понятно, что без ЖЖ я никогда не стану всё это перечитывать.

Но скачать всё это к себе?

Меня это интересует почти исключительно как технический мануал.

Там же был сервер tox. Я думал все уже туда перекатились

Как его адекватно скачать чтобы локально можно было использовать

Учитывая что сейчас везде жабаскрипт, то это нетривиальная задача.

MediaWiki

Я б на твоём месте поискал граббер специально для MediaWiki, чтобы получить архив статей, пригодный для разворачивания на локально установленной MediaWiki.

Кроме того, если тебе интересно именно сохранить данные для использования, то там же должен быть экспорт статей в PDF. Этого недостаточно?

все уже перекатились

В /b ичана.

то там же должен быть экспорт статей в PDF. Этого недостаточно?

Я уже упомянул, что там несколько сотен статей и печатать их руками одну за другой, при этом как-то получив весь список - обезьянья работа.

https://addons.mozilla.org/en-US/firefox/addon/svg-screenshots/

пример файла http://0x0.st/oFyx.svg

Он же кривой весь. И ручной а не автоматический.

несколько сотен статей и печатать их руками одну за другой, при этом как-то получив весь список - обезьянья работа

Ну это ж можно заскриптовать.