Сколько стоят облака?

Если этого много

Это очень много, облака нынче дороги.

http://www.cyclecomputing.com/

Они собирали вот такую штуку http://www.extremetech.com/computing/96829-rent-the-worlds-30th-fastest-30472...

Ну и прикидки тогда будут вида: не взлетит :) Так даже лучше.

Напомни, ты уже получил среднее образование?

Похоже оно.

А зачем вам облачный суперкомпьютер?

Когда пишется отчёт по ФЦП кроме самого плана нужно ещё сравнения с альтернативными реализациями. Облака вполне себе альтернатива, если не сейчас, то лет через десять точно.

Как объеденить 20 Пбайт в один раздел?

Что с fs выбрали?

Пока описали всё, что есть как варианты. Чтобы что-то выбирать нужны деньги для реализации модели для тестирования, а это только в следующем ФЦП будет (если будет). Вполне возможно, что будет смесь.

Допиши в реализации сеть распределённых вычислений за бесплатно.
У меня вон один сервак полгода стоит без дела, да домашний четырёхядерник даже наполовину никогда не загружен.

Для энтузиазму можно прикрутить к клиенту пиписькометр типа Progress Quest.

На амазоне думаю несколько миллонов долларов/месяц будет :)

Да кому в этой стране вообще нужно образование?

Уточняю: остановились на иерархической инфраструктуре. То есть должен быть буфер достаточный, чтобы его хватило на неделю при пиковой загрузке. Появляющиеся новые файлы тут же копируются и отсылаются в архив для сохранение, а также на вычкластер. ФС буфера скорее всего Lustra.

Кластер естественным образом разбивается на части, каждая из которых представляет из себя забитый почти доверху шкаф с дисками и один крейт блейдов. Условно говоря каждому крейту с блейдами по 200 ТБ с которыми работает только он. Тут можно развернуть NFS.

А вот после обработки объём данных резко уменьшается, зато усложняется их структура. На события навешиваются теги, например, двухчастичное событие или многочастичное. И тут возможно выиграет SciDB, так как из коробки получаем поиск по тегам и репликацию, что будет нужно для анализа на внешних ресурсах. Ну или можно городить свой велосипед.

Судя по ссылке выше типа миллиона. Очень может быть что для каких-то ограниченных вычислений оно осмысленнее, чем городить свою инфраструктуру. Основная проблема, что в моей задачи объём данных на сотни Петабайт и тут наверняка возникнет проблема пропускной способности сети.

Ресурсы типа @HOME в планах, но тут проблема даже на уровне набора необходимых флопсов, а также в схеме получения этих самых флопсов вида: обмен времени квалифицированного специалиста, убеждающего и разъясняющего геймерам почему им нужно моделировать события для Супер-чарм-тау-фабрики, а не рубиться в игры, на флопсы. При вменяемом финансировании эти флопсы проще купить.

Есть естественно научные центры с которыми просто можно договориться, но это отдельная долговременная песня.

В планах в смысле рассмотреть как возможную альтернативу, которая не взлетит к сожалению.

Тому, кто использует тэги hpc.