Здравствуйте все!
Есть задача скриптом таскать странички с одно сайта. Делается это через некоторое количество проксей, которые скрипт выбирает в случайном порядке. Т.е. каждый новый запрос идет через другой прокси.
Проблема в том, что прокси эти со временем банятся сервером.
Внимание вопрос: как можно замаскировать поведение скрипта под поведение обычного браузера, чтобы не так быстро банились прокси?
P.S. Сейчас для каждого запроса случайным образом подставляется один из пяти user-agent'ов.
P.P.S. Рассуждения о правовой стороне вопроса предлагаю не начинать.