Здравствуйте.
Есть башскрипт, его задача - страничку по расписанию с сайта wget'ом таскать, текст из неё вынимать и вслух его читать. Некоторое время назад работать перестал. В терминале выхлоп: 403: Forbidden (сайт под CloudFlare, к сожалению).
В браузере сайт спокойно открывается, потому, что я там капчу уже нажимал, и куки позволяют свободный проход. Я попробовал рецепт:
Да, /tmp/cookies.txt успешно сформировался.
Да, если погрепать его по имени сайта, то выхлоп непустой.
Да, «wget --load-cookies=/tmp/cookies.txt -O - $url» отыграло без ошибок.
Нет, выхлоп вот этой вот команды по-прежнему ERROR 403: Forbidden.
Я подумал: может firefox как-то можно запустить, чтоб он без формирования интерфейса просто обработал url и выдал результат (то, что я в Code Inspector'е вижу) в stdout. Попробовал покурить firefox headless mode в надежде на то, что вот это вот то, что мне надо, но погрузился в ужасные дебри питона и селениума, которые мне колхознику очень плохо понятны и кажутся пушкой по воробьям.
Подскажите, пожалуйста, возможность как-то всё-таки затягивать подобное командной строчкой в stdout для последующего парсинга и прочего.
Спасибо за внимание.
bash, cookies, firefox, wget