Python web-bot, передача переменных между скриптами

Глобальные переменные не пойдут?

env

Можно записывать в файл.

Можно через flask реализовать. Там параметры передавать.

Я имел ввиду или два «urllib request», или два скрипта, один вызывает второй с параметрами, так-то нехотелось бы второй скрипт писать, чтобы тупо зайти на линк, но даже при попытке этого, у меня не получилось передать переменную :)

Что-то я не понял задачу. Ты получаешь url GET-запросом, парсишь форму, получаешь вторую страницу, парсишь данные с нее, дергаешь url из формы, но уже методом POST, передаая ему данные формы. Какие первые, вторые страницы? Какая перезагрузка страницы?

1. Открываю url1, качаю капчу.

2. Открываю url2, декодирую капчу.

3. Возвращаюсь на url1, вставляю текст капчи, получаю ошибку, потому что по возвращению и заполнении форм на url1, страница рефрешнулась, и выдала новую капчу.

Что за наркомания?

WWW::Mechanize;

$img_obj = $mech->find_image( /captcha/ );
$mech->get( $img_obj->url, '::content_file' => 'filename.png' );
$mech->back;

Что здесь непонятного?

Ты получаешь ошибку потому что капча привязывается к сессии. При первом запросе сохраняй все куки и значения в скрытых полях формы (если есть) в отдельные переменные, а при третьем запросе подставляй эти куки и скрытые значения вместе со своими.

Не по теме: рекомендую использовать библиотеку requests для таких автоматизаций - она попроще и поудобнее urllib

Совсем упоротый.
Загрузил страницу, сохранил все данные и токены из формы, разгадал капчу, отправил пост-запрос с данными.

http://grablib.org/

Самый тонкий коммент. Зачет. Ты ведь правда знаешь про наличие http://wwwsearch.sourceforge.net/mechanize/ ?

Но как видите, чтобы заполнить форму при помощи urllib, требуется загрузить страницу заново с новымы значениями в форме.

Уууу, друг, пока что Python не для тебя.

Варианты?

Попробуй начать с PHP.

3. Возвращаюсь на url1

а зачем ты оттуда уходишь? на url2 ходи в другой сессии.

Ещё Ghost.py есть. Но осилишь ли ты?

Mechanize рулит :)

Читал, не хотел скрипт переписывать, оказалось намного проще с mechanize. Спасибо!

Теперь знаю. А теперь вопрос, есть линки на файлы, заходя на которые, тебе сразу выкидывают окно сохранения файла. Я знаю что после ввода капчи, мне дадут скачать файл, но не путем переадресации, а javascript или php скриптом. Как их сохранять?

Это совсем разные вещи.

Тт, неважно, получилось. Повезло что сайт после ввода капчи, запоминает меня на некоторое время, и просто переходя на линк еще раз я получаю файл.

Обычный: retrieve(url) сработал.

Спасибо

эммм... а не проще заюзать Selenium?

не проще)