Кто хочет поучаcтвовать в создании распределённого поисковика?

Опенсорс?

Да, опенсорс, но пока код не очень чистый, до оформления и публикации исходников дело дойдёт попозже.

Т.е. предлагается поставить какой-то блоб, который будет по командам из сети что-то делать на моей машине? Вы серьёзно? При том, что даже целей ясных у проекта нет?

Исходники вперед, утром - исходники, вечером - помощь или вечером - исходники, а на другой день утром - помощь.

так есть же уже поисковик

Да-да, исходники в студию. Никто тут ругать за плохой код не будет

>Никто тут ругать за плохой код не будет

4.2

>Есть желание поддерживать этот проект, чтобы иметь свой ботнет для разных экспериментов

fxd.

>Мы выдаём простые задания, вроде «качнуть страницу, применить к ней такую-то процедуру извлечения данных, вернуть на сервер выдернутые данные» или «вернуть свой конфиг» или «пинг».

Путинвзрываетдома опенсурс эдишн? =)

Тсс, распугаешь же. Да и правда, сдался тебе его код что ли, чтоб его ругать?

>Да и правда, сдался тебе его код что ли, чтоб его ругать?

А я и не буду ругать. Мой код тоже хорошим не назовешь. Но ты же знаешь ЛОР, кто-нибудь да матюгнется на код. Я буду ругать за то, что он его не показывает и что-то просит у сообщества.

> есть сервер, раздающий задания и программа-клиент, исполняющий задания.

То есть, это как гугль, только ты ещё ему бесплатно помогаешь?

Без открытого и распределённого хранилища такой поисковик не нужен.

А где код можно качнуть??

jabber: peorg@jabber.org

skupe: zumsker

А если в ни там ни там нет??
зы. Может skype ?

вот http://www.rsdn.ru/forum/life/4453030.flat.aspx#4453206 уже сделали распределенный поисковик

Поставить десяток машин 3-5 летней давности в современный ДЦ сейчас стоит почти бесплатно. И по мощам, и по скорости будет сопоставимо с тем, с чего начинали гуглеводы. Было бы желание.

Кстати, плюсую разработку открытого распределённого поисковика с открытой распределенной базой данных. Выступил бы добровольцем в создании и предоставил бы машинки для экспериментов. Проблема только в том, что сам не потяну.

> Кто хочет поучавствовать в создании распределённого поисковика?

Неосиляторы русского набежали. «Поучаствовать» от слова «участие». Еще школу не закончил?

> можно поставить и забыть.
а потом он ка-а-а-ак раскроется!

http://yacy.net/en/Screenshots.html

Web Search by the people, for the people

YaCy is a free search engine that anyone can use to build a search portal for their intranet or to help search the public internet. When contributing to the world-wide peer network, the scale of YaCy is limited only by the number of users in the world and can index billions of web pages. It is fully decentralized, all users of the search engine network are equal, the network does not store user search requests and it is not possible for anyone to censor the content of the shared index. We want to achieve freedom of information through a free, distributed web search which is powered by the world's users.

Давайте попробуем для начала лор проиндексировать.

Задания на клиенте бот выполняет или человек?

Не нравится архитектура. Страниц в инете стока что раздавать задания с центрального сервера сакс. Пусть лучше ноды сами себе ищут работу и хранят результаты поиска у себя. Ну а поиск как-нить по DHT сделать. В общем, есть над чем подумать.

Ну ясно, что не на каждый урл будет идти задание.

о! Я им помогу. Раньше держал паука от grub-ng (wikia.com), но они закрыли проект(

kiverattes, лучше устройся на оплачиваемую работу.

За это хоть платят?
Я же буду на своём серваке запускать бинарники неизвестного происхождения, платить за трафик провайдеру...

оно же на дотнете

на чем написано?

судя по профилю ТС - на С++. Это радует. Могу помочь в тестировании, мелких патчах (потому что я в С++ разбираюсь, как свинья в апельсинах) и канале.

есть же yacy

у него боты на яве - значит ресурсов много надо для их работы. Сервер-то на яве нормально, но не поисковые боты

> значит ресурсов много надо для их работы. Сервер-то на яве нормально, но не поисковые боты

сколько?

Лорчую