Как паразитировать на Google Search?

Изучите scroogle.org

Формируешь http-запрос, получаешь ответ, парсишь, рисуешь.

API конечно лучше, но, я думаю, потенциальный работодатель хочет видеть не то, как ты пользуешься парой функций.

дык гугли же! http://www.gnucitizen.org/blog/google_py/ где то был отличнейший пример но потерял. а вообще делается быстро при помощи python + urllib. или python + pyqt4

о! спасибо. оно даже через curl легко и непринужденно работает )

мне кажется что работодатель не захочет pyqt4 на сервер

ну тогда urllib. вот ещё http://www.blackfistsecurity.com/2009/01/improving-your-google-hacking-with.html но всё же не то. если найду напишу.

спасибо. но я наверно на пхп сделаю, ибо в питоне не силен

>Формируешь http-запрос, получаешь ответ,

смотришь на капчу, сосешь балумбу.

бан в гугле 0_о?

ух ты что я нашел :3
http://www.linux.org.ru/news/doc/5112336

>бан в гугле 0_о?

В Яндексе я сам видел, что если заподозрят, что ты робот, заставят ввести капчу.

В Гугле такого видеть не приходилось, но тоже, наверное, заставят.

Ага. На ЛОРе даже регулярно темы всплывали, ищи по названию «Забанили в гугле». Корпорация зла не любит роботов и иногда требует циферки.

Да не, робота забанят, это ясно. Это ж тестовое задание, его прогонят пару раз и забудут. Правильное решение - покупка у гугла АПИ, но это должен делать работодатель, а не собеседующийся.

Много запросов с одного IP и капча во все поля вместо результатов поиска... ибо гугл не любит очень умных

С Тором все отдаст, проверено.
Год с лишним назад писал подобное с целью выпытать у гугла число веб-сайтов по доменам первого уровня.
Без Тора тоже, только если пользователь не слишком быстро печатает :)
Питон, Тор, Курл, подмена юзерагентов, таймауты.

Может, задачу можно решить использованием плагинов Stylish и Greasemonkey? Тогда точно никаких капч не потребуется.

нельзя. решение должно быть исключительно сервер-сайд

всем спасибо. в общем понятно, как-нибудь сделаю

> пользователь вводит поисковую фразу, пхп (или перл/питон/руби/баш - неважно) делает запрос гуглу, парсит его, получаем на выходе принципиально новый с нескушными обоями результат поиска.

Кто и что парсит? «Нескучные обои» - это подмена выдачи на стороне клиента или оформление отчета в удобоваримом виде?

3) какбы эмуляция браузера средствами сервер-сайд скрипта.

Сервер-сайд тут вообще при чем?

3 - мне дико не нравится.

Чем же?

Много запросов с одного IP и капча во все поля вместо результатов поиска... ибо гугл не любит очень умных

Зато любит старательных.

Видимо я плохо объясняю что требовалось.
Пользователь в браузере открывает например http://супер-пупер-искалка.рф/,
вводит в поле фразу типа «как поставить линукс», тыкает кнопку «искать!»,
открывается страница http://супер-пупер-искалка.рф/?искать=как%20поставить%20линукс с результатами поиска.

В варианте №3 я подразумевал что скрипт берет вон ту гетовую переменную, через курл делает запрос к гуглю, парсит его ужасный hmtl'ный выхлоп и форматирует как мне угодно. Не нравился мне этот вариант сложностью именно парсинга.

Ты пишешь поисковик, который будет использовать результаты поиска Google? У меня только один вопрос - ну ты понял какой

>>я подразумевал что скрипт берет вон ту гетовую переменную, через курл

и в чём собственно затык? или за вас написать?

нет, спасибо. я уже продинамил все дедлайны :3