Создание своей СУБД + вебсервера + системы автоматизации

Аж до 100 запросов в секунду? К СУБД? Да, это конечно многое объясняет :)

Круто конечно, особенно про системы автоматизации. Сам с 1С работаю.

>мы начали писать техническое описание требований на сайте

Техническое описание не так важно, важно то что вы собираетесь делать дальше с условно готовым продуктом.

>Аж до 100 запросов в секунду?

100

Совсем слепой стал, да?

одна из идей - бесплатно раздавать но при этом сделать платные сертифицированные курсы.

Совсем слепой стал, да?

100.000

100 запросов в секунду с точностью до 3го знака после заптой, нет?

bibi, для тебя же написали: если есть желание написать какую-нибудь глупость - напиши это в другом треде :)

пользовать в своих проектах. всем надоело закладывать в смету проектов стоимость ораклов и 1С.

>всем надоело закладывать в смету проектов стоимость ораклов и 1С.

Эту фразу стоит понимать как: «Втроем вы собираетесь написать СУБД, способную конкурировать с Oracle»? Извиняюсь за скептицизм, но это звучит нереально.

Знаешь, некоторые ребята вдвоём решили сконкурировать с yahoo. И где теперь этот yahoo? Так что не говори «нереально», говори «вам будет трудно»

bibi, для тебя же написали: если есть желание написать какую-нибудь глупость - напиши это в другом треде :)

И не подумаю. Даже и не уговаривай. У меня железное правило: на глупость я отвечаю сугубо глупостью. Постить это в талкс - явная провокация флейма чистейшей воды и ничего более. Я уж не говорю о содержимому по ссылке - тут лулзы можно неделями ловить. Русос нервно курит в сторонке. Так что на что, сударь, извините, но я буду играть сугубо в рамках заданных вами правил. Флейм так флейм. Если конечно будет настроение.

>И где теперь этот yahoo?

Помимо поиска у yahoo есть свои сервисы, популярные у буржуев, но это оффтоп.

Экономь силу, vahvarh, я в тебя верю.

Хотелось бы услышать, используете ли вы mnesia ( по ссылке не нашел )?

Можешь не писать про «почему нет», но если таки не используете, было бы неплохо сделать какой-нибудь промежуточный слой, т.н. persistence layer, чтобы можно было работать как с диском, так и с памятью (memcached - это для бедных). Насколько я знаю, такие штуки делаются поверх software transactional memory, не знаю как именно,но в mnesia реализовано.

задача конкурировать с оракл не ставится :) опять же, _все_ фичи оракл или 1С ни к чему - нужны самые ходовые, а это не так и много если разобраться.

mnesia нет, не используем и не планируем. планируем писать свой storage, для того чтобы добиться нормальной транзакционности и репликации.

пользовать в своих проектах. всем надоело закладывать в смету проектов стоимость ораклов и 1С

Тогда уже сразу пишите свой Linux ибо в смету закладывать приходится и RHEL

абсолютно не обязательно. debian никто не отменял. даже оракл уже под дебиан выпускает пакеты.

И что, всё это вы собираетесь сделать втроем? Только не надо про «двух парней» - там отнюдь не двое было.

Лицензия распостранения пока не выбрана.

Между чем и чем колеблетесь?

Не так давно был случай поприземленнее. Расово-еврейский смолтокер Ави Брайант, в отсутствии современных инструментов в своем любимом язычке под задачу ( веб-аппликейшен-серверы ) написал себе довольно крутой и общий фреймворк ( seaside.st ), dvcs ( monticello ), вроде какую-то orm или oo-db и создал бизнес по модели SaaS - БД для пользовательских нужд, dabbledb.com. Всего там в разработке участвовало, емнип, трое человек, один из которых дизайнер. Не яху конечно и уж точно не гугл, но вполне живо.

Надеюсь ТСа пример вдохновит, тем более что более-менее из той же оперы.

> Между чем и чем колеблетесь?
Как я уже писал - скорее всего бесплатное распостранение без исходников (боимся копирастов запатентовавших какой-нибудь btree) и платные сертифицированные курсы.

щас напишу это на сайте.

не знаю как там и где яху, но вот команда их тигров, очень ничего, да :)

И что интересно, русских в ней половина ;)

жизнь впереди длинная, проектов предстоит много - так что рано или поздно что-то вроде сабжа придется писать как ни крути. поэтому мы решили не тянуть кота за яйца и начать прямо сейчас.

Готов рассказать тебе про устройство мнезии.

Именно тут ее не будет, мысль в том, что будет достаточно простой key-value storage (ага, 2007) но он будет уметь snapshots, наверное

мы не лимитируем сроки, да. И количество фич (: И что вообще будем делать. varhan набросил на винтелятор, а мы так, лапатами пришли помогать ;)

> рано или поздно что-то вроде сабжа придется писать как ни крути

Слишком мало людей, слишком нечеткие планы... да и как-то закрыто всё.

Корованы, корованы забыл! А то в 2007 году ты уже начал делать игрушку, да все как-то ее до сих пор и нет...

> мысль в том, что будет достаточно простой key-value storage (ага, 2007)

Без хотя бы какого-нибудь недоSQL (как в GAE, например) это не имеет смысла :)

> всем надоело закладывать в смету проектов стоимость ораклов и 1С.

Топикстартер получает $5000.00 за проект, цена оракла для него не является критичной. Это же не для нищебродов сделано будет.

«я пиарюсь»(ц) ; )

одна из идей - бесплатно раздавать но при этом сделать платные сертифицированные курсы.

вменяемая документация планируется?

данные как хранить планируете?

> вменяемая документация планируется?

База бесплатно, а документация за $10000000000 - это тоже вариант бизнес-модели

>Готов рассказать тебе про устройство мнезии.

А расскажи. И особенно расскажи почему она сосет для вашей задачи. А то я с ней никогда сам не работал, но по описанию такая штука - загляденье, вот и мучают вопросы.

>> мысль в том, что будет достаточно простой key-value storage (ага, 2007)

Без хотя бы какого-нибудь недоSQL (как в GAE, например) это не имеет смысла :)

На сайте расписано - предполагается сделать отдельно хранилище и отдельно процессинговый модуль. хранилище тупо хранит а процессинг как раз реализует (очень крутой) SQL поверх хранилища.

В оракле это примерно так же. У них нижний уровень - тупая не иерархическая файловая система, с адресацией по RowId.

> $5000.00 за проект
просто загляни сюда: http://www.uasoft.com.ua/1cv8/price.php (цены в гривне).

> вменяемая документация планируется?
планируется более чем вменяемая. уж лучше чем у постгреса или mysql.

данные как хранить планируете?

на сайте написано. да и в треде тоже теперь уже.

молодцы. Идею написания системы автоматизации поддерживаю, идею создания БД + вебсервера - не очень, пока не вижу планируемых преимуществ перед существующим ПО.

И насчет «высокий уровень параллелизма»

Используя erlang и некоторые специфичные идеи, мы рассчитываем распараллелить достаточно сложные запросы на все имеющиеся ядра внутри одного процессинговой ноды.

Как??! Частные случаи несомненно можно. Но как рапараллелить простой inner join? Взяли декартово произведение, разбили на квадратики и каждый квадратик поручили исполнять отдельно?

Вобщем, проект забукмарчил, буду с интересом следить (я так понимаю целью поста было заинтересовать, а не привлечь разработчиков? (судя по

Тут я более конкретно пока расписывать не буду, по причинам параноии, но тестовый вариант уже параллелится.

))

> А расскажи. И особенно расскажи почему она сосет для вашей задачи.

Чем она сосёт «в общем», это боюсь действительно больше к киру.
Но она по определинию (как, кстати, написано в вики) не является десктопной СУБД общего назначения.

У нас же идёт разделение на тупое хранилище (местами более тупое чем мнезия), но с транзакционностью и процессинговый модуль.

> На сайте расписано - предполагается сделать отдельно хранилище и отдельно процессинговый модуль

Я читал, поэтому меня и удивили слова о key-value.

процессинг как раз реализует (очень крутой) SQL

А в чем его крутизна, ты не говоришь из-за паранойи? :)

терпение, Ватсон. мы сами пока не знаем какие у нас планы - выработка требований полным ходом идет.

[посыпает голову пеплом] вот так пишешь-пишешь говноскрипты на перле.
считая большой удачей то, что при очередном нагрузочном тестировании говносервер выдержал 1500 запросов с секунду(не статика). да и то за счет переписывания части проекта под встроенный в nginx perl.

а тут люди сами СУБД мутить собираются на полном серьезе..
шо делаеццо..

Очередная реляционка? Но зачем? Даже неинтересно.

Разработчиков тоже ищу.

Как параллелить - например если запрос ДОСТАТОЧНО сложный то там будет несколько листьев в дереве плана выполнения, таких что будут обращаться к индексам и брать данные. они могут их брать и сувать в следущий процесс фильтрации или декартового произведения или ещё чего-бы-то-ни-было. то есть будет не «то работаем с индексом то фильтруем» а «одновременно работаем с индексом и фильтруем». но для этого придётся порождать процессов в несколько раз больше чем размер explain plan. а это уже только erlang.

Назови мне хоть одну работающую СУБД кроме оракла, постгреса и ms sql server? так что их не так уж и много.

>да и то за счет переписывания части проекта под встроенный в nginx perl.

[оффтоп]Это ты зря. Можно было попрямее - nginx ведь в дефолтовой поставке может с мемкешедом общаться. Хотя, если там одна динамика..[/оффтоп]

Очевидно, люди же хотят просто замутить стартап, чтобы в перспективах продаться 1Су или Яндексу, кто больше заплатит. Нормальная ситуация для заРФья, но в РФ у них просто рейдеры отожмут сервер с исходниками, так дешевле

> Но как рапараллелить простой inner join?

предполагается, что на прикладном уровне будет реализована некая объектная модель специализированных сущностей технологической платформы. это не только натолкнет разработчика на вменяемые и адекватные приемы кодирования, но крепко развяжет нам руки в плане распараллеливания и оптимизации на нижнем уровне.

> предполагается, что на прикладном уровне будет реализована некая объектная модель специализированных сущностей технологической платформы

Без обид, но пока вы напоминаете лебедя, рака и щуку :)

сам в шоке - но ты не видел что творилось еще 2 дня назад. сейчас хоть какой-то вектор наметился.

угу. в плане ОО-платформы мы ещё не устаканились. Тут у каждого своё видение. В том числе поэтому я пока ещё не лезу глубоко в программирование, а пытаюсь найти свежий взгляд. Например, была идея ОО-базы данных, но на момент когда я или кир пытаемся представить себе наследование, у нас мозги закипают. А без наследования ОО-Бд ничем от суРбд не отличается.