[Посоветуйте-тред] Собрать кластер

Я надеюсь вы преподаватель, не студент? Какие выч. задачи будет решать кластер? Какие требования?

Опиши задачу. А то может стоит вместо брендового железа вообще собирать кластер из десктопного в самодельном корпусе. При этом можно будет сэкономить или выиграть по производительности.

>Я надеюсь вы преподаватель, не студент?

да, не студент

Какие выч. задачи будет решать кластер? Какие требования?

Стоимостные требования указаны в теме (55-60 тыс). Технические должны формироваться из задач: конечно-элементные вычисления, геометрическое моделирование, возможна, обработка графики (в общем, с ним может будут работать представители разных направлений).

Софт самописный или готовыми продуктами планируете пользоваться?

>Софт самописный или готовыми продуктами планируете пользоваться?

Преимущественно самописный, но, возможно, что-то готовое в перспективе тоже будет использваться.

> Необходимо, составить ориентировочную смету на вычислительный кластер начального уровня (55-60 тыс. грн.) для университетской лаборатории

Я думаю, из системных блоков ZX-Spectrum выйдет очень большой и недорогой кластер.

Серваки с ebay обойдутся в разы дешевле, мы брали брендовые и нонейм, вполне нормально. Для начала реши, что на них будет крутиться. Некоторым задачам нужен nas и 10Г езернет, что выйдет в копеечку.

Я бы на вашем месте в первую очередь связался с коллегами из других учебных учреждений Украины, например, Львовским ІФКС или КНУ, короче погуглить, что стоит у соседей, возможно связаться с ними лично ну а там принять решение в рамках профинансированной суммы.

купить машину PS3 ещё не предлагали?

у нас в ИГТМ стоит кластер на каких=то первых 64р атлонах... дело в том, что гораздо дешевле ВУЗу сделать маленький ботнет на каких-нибудь боинках на ВУЗовских машинах, чем покупать кучу барахла.

Я думаю, из системных блоков ZX-Spectrum выйдет очень большой и недорогой кластер.

Какой может быть кластер из телеприставок? Ты бы X-box посоветовал бы лучше.

Кстати, стоит учесть расходы на электричество (много) и продумать систему охлаждения (стоит ли говорить, что она будет очень шумной). Сколько тепла придется отводить подсчитать легко: это столько сколько берет электричества, т.е. от 200Вт на одну плату. 10 плат = 2кВт, т.е. (сравнивая с эл.чайником) каждые 1.5 минуты будет выкипать литр воды.

Деньги выделили — надо хоть что-то брать, чтобы оно было в стойке и гудело, чтобы для тупых было ясно — это сервера :)

А то доказывай им и объясняй, что в системниках HP пролиантов не обычные десктопные компоненты :)

>Технические должны формироваться из задач: конечно-элементные вычисления, геометрическое моделирование, возможна, обработка графики

для второго точно кластер не нужен

для первого и третьего - зависит от размера и характера задач

Для первой задачи в большинстве случаев полезен быстрый и дорогой интерконнект для рендерилки он не сильно актуален

Преимущественно самописный, но, возможно, что-то готовое в перспективе тоже будет использваться.

Если софт уже есть - просто попроситесь к кому нибудь с ним на потестировать.

ЗЫ: Из опыта могу сказать что фирменный кластер под ключ в разы удобнее самосборного (и не факт что дороже) ... если нужен кластер ради опыта по сборке кластеров то это одно а если для работы - другое :)

> Какой может быть кластер из телеприставок? Ты бы X-box посоветовал бы лучше.

Они сильно изменились за последние годы. Но да, предложение глупое. По любому надо делать из стандартных блоков, которые потом можно будет разобрать на обычные PC, когда все наиграются и поймут, что это не нужно.

PS: делали бы лучше распределенные вычисления в среде типа BOINC — поставили бы на все компьютеры, и масштабировать выч.мощности проще и ресурсы будут использоваться лучше. А для отчета начальству собрали бы один компьютер покрасивше и обозвали бы командным центром...

>Кстати, стоит учесть расходы на электричество (много)

Не стоит, если не платите за электричество из своего кармана :)

и продумать систему охлаждения (стоит ли говорить, что она будет очень шумной).

Cама система охлаждения (кондёры) не шумит :) Но денег стоит :)

>PS: делали бы лучше распределенные вычисления в среде типа BOINC

Для перечисленных задач не подходит

http://www.lenta.ru/news/2011/10/14/blade/
для Ъ:
Компания Blizzard объявила, что она собирается продать с молотка две тысячи старых блейд-серверов World of Warcraft.
Аукцион будет проходить на eBay с 17 октября по 14 ноября. На нем будут продаваться блейд-сервера Hewlett Packard ProLiant, которые использовались после запуска проекта в 2004 году и вышли из употребления после модернизации системы.

думаю баксов за 600-700 за лезвие обойдется, заодно и правителей эльфов 80+лвл поддержите:)

> Cама система охлаждения (кондёры) не шумит :) Но денег стоит :)

Это смотря сколько тепла отводить придется.

Если там действительно IBM HS20 но очень хорошее приобретение :))

А то может стоит вместо брендового железа вообще собирать кластер из десктопного в самодельном корпусе.

Гуголь тоже собирает из всякого шлака, незазорно )

> Для перечисленных задач не подходит

Для конечно-элементного анализа — нет, не подходит, но тут куча денег уйдет на быстрые сетевухи и свичи. Проще (и правильней) для таких задач брать пару многопроцессорных плат. Про остальное сказать затруднительно, ибо слишком расплывчато.

>IBM HS20

блейд-сервера Hewlett Packard ProLiant

/0

>Это смотря сколько тепла отводить придется.

У меня примерно 10Квт на стойку - стойки по любому шумит сильнее кондёров :), вряд ли за указанный бюджет топикстартер сможет заказать водяную систему охлаждения :)

Я проcто пошел по сцилке которую вы дали :)

> и продумать систему охлаждения (стоит ли говорить, что она будет очень шумной).

есть же проверенное решение: свалить железо в кладовку, поставить дешевый кондёр (холодящий так, что несовместимо с жизнью, они дешевле), запитать всё от центральной сети универа (чтобы невозможно было понять, кто же именно жрет электричество, и за него платил кто-то другой)

>пару многопроцессорных плат.

Это и есть кластер :)

+к этому надо рассчитывать отказоустойчивость системы, резерв блейдов для замены по блэкауту, и т.д. и т.п.

http://ompldr.org/vYXQ3MA
правда?:)

> поставить дешевый кондёр

Почём щас «дешёвый кондёр» на +10 КВт холодопроизводительности ? :)

Ага, ровно первая сцилка в этой самой статье :)

и дисковое пространство! Нашей квоты, например, в 50Га не хватает вообще ни на что. стабильно около 1TB :) и это только на одного, правда весьма активного пользователя.

>+к этому надо рассчитывать отказоустойчивость системы, резерв блейдов для замены по блэкауту

Не нужно. Топикстартеру нужен HPC а не HA кластер, там дешевле чекпоинтить задачи а потом перезапускать их чем городить отказоустойчивую инфраструктуру

> Почём щас «дешёвый кондёр» на +10 КВт холодопроизводительности ? :)

хз, но мы бушный брали у алкаша за 2к рублей, а где уж он его свинтил - ХЗ. Единственный минус того кондера - температура не регулируется, он холодит по дефолту, и в помещении где он работает моментально возникает лютая зима. Поэтому для него нужна отдельная кладовка, живые люди там не выживут.

>и дисковое пространство! Нашей квоты, например, в 50Га не хватает вообще ни на что

Над вами издеваются :)

>Из опыта могу сказать что фирменный кластер под ключ в разы удобнее самосборного

Где вы брали фирменный (есть ли цены)?

Мне сейчас нужно смету составить, которая будет учитывать все расходы. А собирать все равно не я буду, а люди с ВЦ (если будет взят для самосбора).

>у алкаша за 2к рублей

Круто, а мы отдали за кондёры 120к

>>пару многопроцессорных плат.

Это и есть кластер :)

Этак и два рядом стоящих компа можно кластером обозвать. :) Судя по бюджету, топикстартеру как раз хватит денег на один хороший 4х процессорный комп.

в той, первой, ссылке общее описание лезвия, а близзарды собственно продают hp proliant'ы старые, потому и удивило ibm hs20

>>у алкаша за 2к рублей

Круто, а мы отдали за кондёры 120к

Летом что ли брали? Или тянуть далеко пришлось?

>Где вы брали фирменный (есть ли цены)?

Один брали вот тут http://www.t-platforms.ru

Второй у дилеров IBM-а, но покупкой второго я не занимался и сходу не скажу через кого шла поставка

Тогда я бы ориентировался на что-то типа этого:

http://fotomag.com.ua/HP_DL585G2_-413928-421-info.html

Только на оставшиеся деньги довел бы процессоров до 4х, и оперативной памяти побольше.

> купить машину PS3 ещё не предлагали?

Толстушек больше не делают, да и греются они неслабо.

А есть промышленные кондёры за 2к ? :)

> Поэтому для него нужна отдельная кладовка, живые люди там не выживут.

Где берёте глухих для работы ? :)

Это формальные требования) Благо есть чем отчитываться. Но иногда они начинают наседать и приходиться ужиматься до 250. но это разрастается до прежних размеров за месяц-два.

Поделил красные циферки на серенькие и сравнил с бюджетом топикстартера. Маловато :(

>моментально возникает лютая зима
Главное чтоб конденсата не было =)

> Поделил красные циферки на серенькие и сравнил с бюджетом топикстартера. Маловато :(

Ну так это то на что ориентироваться. Процессоры бы только другие поставить. И найти где это же можно взять подешевле. Если купить в европе и привезти, то будет дешевле более чем в 2 раза: http://www.google.com/search?hl=en&tbm=shop&q=HP ProLiant DL585 G2&am...