История изменений
Исправление BaBL, (текущая версия) :
Посоветуйте сервис или же достаточно простой инструмент для анализа сырых данных на предмет выявления последовательностей
Тут зависит от качества данных. Вообще, большое кол-во сырых данных обрабатывать и вертеть как угодно можно в R (Rstudio), это научный язык такой. Его прямая цель - то что ты описал. Но может подойти и python и php и javascript, смотря какой язык больше знаешь, а почистить и просуммировать на нем данные - дело техники.
Скорее всего понадобится максимально дешевый (для сервера) способ спарсить ответы на большое количество запросов, формируемых по известному алгоритму (подходит под определение брутфорса кстати?)
Вполне подходит под определение. Поэтому лучше чтобы у тебя был сервер на Private Person где-нибудь в Эквадоре (абузоустойчивый), иначе, теоретически, могут предъявить.
Из описанной задачи, ИМХО, nodejs краулер тебе подойдет. Он и с DOM работает и довольно просто пишется (в интернете демо примеров полно, прям качай, меняй урл и айдишники и получишь готовое решение). Искать по словам: nodejs crawler http dom source / example.
PHP пожирнее будет, но для него есть PHPQuery кажется или PHPDOM, фактически переводит плейнтекст в некий XML подобный объект с запросами: $obj->find('#id')
Исходная версия BaBL, :
Посоветуйте сервис или же достаточно простой инструмент для анализа сырых данных на предмет выявления последовательностей
Тут зависит от качества данных. Вообще, большое кол-во сырых данных обрабатывать и вертеть как угодно можно в R (Rstudio), это научный язык такой. Его прямая цель - то что ты описал. Но может подойти и python и php и javascript, смотря какой язык больше знаешь, а почистить и просуммировать на нем данные - дело техники.
Скорее всего понадобится максимально дешевый (для сервера) способ спарсить ответы на большое количество запросов, формируемых по известному алгоритму (подходит под определение брутфорса кстати?)
Вполне подходит под определение. Поэтому лучше чтобы у тебя был сервер на Private Person где-нибудь в Эквадоре (абузоустойчивый), иначе, теоретически, могут предъявить.
Из описанной задачи, ИМХО, nodejs краулер тебе подойдет. Он и с DOM работает и довольно просто пишется (в интернете демо примеров полно, прям качай, меняй урл и айдишники и получишь готовое решение). Искать по словам: nodejs crawler http dom source / example.