где найти список экстремистких материалов?

будешь перечитывать?

Не совсем.

Экстримистским материал может стать только по решению суда - тут за 10 лет ничего не изменилось. Список можно тут посмотреть https://ru.wikipedia.org/wiki/Федеральный_список_экстремистских_материалов

Экстримистским

Экстремистским. Свои сообщения нельзя править?

Ну вот там и приведена ссылка на документ, в котором помимо опечаток в URL, сами URL надо выковыривать как изюм из булки. Надеюсь, не надо объяснять, что машине надо табличку, а не парсить от руки.

Заберите список из минюста https://minjust.ru/sites/default/files/spisok_40_0_0.docx . Не думаю что там правда лучше будет (табличка в вордовском файле - как тебе такое Илон Маск?)) Но это первоисточник.

Это не машиночитаемый источник, и там не только интернет-ресурсы. То есть его нельзя загрузить в конфиг прокси-сервера, например, без предварительной обязательной ручной обработки, и чтобы сразу заработал фильтр.

Блин, я думал, ты хочешь скачать все это и распространять!

А ты, оказывается, хочешь пагубным делом заниматься. И Великую Страну в говно скатывать...

Вы с какой целью это реализуете? Если для исполнения законодательства как оператор связи - то так никто не делает, у связистов единый лист блокировок - они его вливают в магистральные маршрутизаторы, и проверяется это всё спецкомплексом, ревизор называется. Если для себя то сами и парсите этот бюрократический опус) ну можете ещё жалобное письмо написать в минюст и в минкомцифру - может лет через 10 вместо ворда эксель начнут выкладывать)

02.wmv

Боюсь, что ответы на ваши вопросы не решат проблему, сформулированную в топикстарте.

Отличная тема для Admin.

kremlin.ru

pravo.gov.ru

Это не машиночитаемый источник

docx2txt его вполне адекватно читает

Более того, его вполне адекватно, с файловой системы, читает веб-сервер — перед тем, как отдать веб-браузеру интернет-пользователя в момент скачивания. Гы гы.

вы https фильтруете ?

Вы правы. К сожалению не существует машиночитаемого источника от Минюста. Уже много лет слежу за списком для работы, но только в том виде, в котором он предоставляется Минюстом. В нем не только интернет ресурсы, но и музыкальные материалы, печатные. Пытался я писать парсер и вытягивать ссылки. Но к сожалению, в 50% случаях ссылки написаны с ошибками (htp://, http//www..., http:http://www.... и так далее). Может быть где-то в интернете кто-то в «ручном» режиме и ведет только по интернет ресурсам, но я не встречал.

Для себя я тяну по RSS его и у меня он используется как есть в электронном виде, так как для работы требуется не только интернет ссылки, но и запрещенные печатные материалы.

http://minjust.ru/ru/extremist-materials/rss

Спасибо за информацию! За RSS-ленту — отдельное спасибо! Загрузил себе в Mozilla Thunderbird.

UP!

RSS большее не работает: не обновляется и не виден громо-птицей.

Зато есть полный список, https://minjust.gov.ru/uploaded/files/exportfsm.csv, но увы, до сих пор не машиночитаемый, в рассмотренном нами смысле.

Допустим. Можно ли найти несложный алгоритм, который выделяет корректного вида URL в отдельное поле, чтобы можно было из него просто скопипастить в адресную строку браузера – для проверки доступности эктремистского ресурса или проверки его фильтруемости провайдером?

Не ту страну назвали Норвегией.

Ты точно не с литлвана?

https://stackoverflow.com/questions/25135347/how-to-check-status-of-urls-from-text-file-using-bash-shell-script