LINUX.ORG.RU

Gentoo в мире высокопроизводительных вычислений


0

0

Кластер MBC-1000/16, созданый в Институте динамики систем и теории управления (ИДСТУ) СО РАН, является главным вычислительным ресурсом Иркутского научного центра, находящимся в коллективном доступе. Система состоит из шестнадцати двухпроцессорных серверных модулей Supermicro. Для объединения модулей в единый вычислитель использованы соединения двух типов: Myrinet (оптоволоконная сеть для внутрипрограммных обменов) и Gigabit Ethernet (для выполнения сервисных операций). Узлы кластера функционируют под управлением OC GNU/Linux. На смену изначально установленной ОС Linux Fedora Core 2 со временем пришла ОС Gentoo Linux.

>>> Подробности



Проверено: Shaman007 ()
Ответ на: комментарий от Somewho

> dd никто не запрещал :)

Буш гарантийный модуль разбирать и вытаскивать из него хард ? ;))

Ну-ну. ;)

hint: после такого "пионерского" поступка в случае неработоспособности 20 нодовой железяки боюсь тебе придятся квартиру продать чтобы расплатиться (если она в Москве)

sS ★★★★★
()
Ответ на: комментарий от rcr_cremator

бля - а загрузится по сети (обычно по умолчанию) и подцепится по ssh/vnc (довольно многие дистрибутивы поддерживают) не дано? А то что многие сервере поддерживают аппаратно удаленную установку вплоть до биоса для тебя тоже сурпрыз?

Orlangoor ★★★★★
()
Ответ на: комментарий от Napkin

>> ну для этитх целей существует KVM >Который будет использоваться раз в год от силы.

Хорошо если реже ;)

Кроме того если железяка "общественная" то нелокальный root там должен быть запрещён по определению

sS ★★★★★
()
Ответ на: комментарий от rcr_cremator

> а вот если тачка у тебя не забутилась и сеть не поднялась? или у тебя скрытые таланты экстрасенса?

Правильно. Наш подход. Сначала поставить телегу в серверную, а потом проверить, загрузится ли она с livecd. ;)

Napkin
()
Ответ на: комментарий от plm

>Пересобрали все и получили ускорение на синтетических тестах в 8%, хехехех...

Если ты думаешь, что вся прелесть генту заключается в возможности "пересобрать фсё", ты ошибаешься.

AsphyX ★★★
()
Ответ на: комментарий от anonymous

>Генту (как и слакваре) это ось для фетишистов, которых хлебом не корми, водкой не пои, а дай только что нибудь скомпелировать (а сталобыть и вступить)

А чё нужно на слаке компилять ? ;)))

sS ★★★★★
()
Ответ на: комментарий от Orlangoor

>бля - а загрузится по сети (обычно по умолчанию) и подцепится по ssh/vnc (довольно многие дистрибутивы поддерживают) не дано? А то что многие сервере поддерживают аппаратно удаленную установку вплоть до биоса для тебя тоже сурпрыз?

ты считаешь, что на кластерах круглосуточно только операционка переставляется? :)

а систему по сетке я на ноут ставил в свое время, так как там не было сидюка. спасибо второй раз нет желания :), c LiveCD веселей.

тем более соотношение цена железа/монитор, можно расщедриться и воткнуть старый 60герцовый моник.

rcr_cremator
()
Ответ на: комментарий от rcr_cremator

>а систему по сетке я на ноут ставил в свое время, так как там не было сидюка. спасибо второй раз нет желания :)

В чем проблема? Особой разницы - по сети или нет не вижу...

>тем более соотношение цена железа/монитор, можно расщедриться и воткнуть старый 60герцовый моник.

ты считаешь, что на кластерах круглосуточно только операционка переставляется? ;) Больше там монитор не для чего не нужен :D

Orlangoor ★★★★★
()
Ответ на: комментарий от AsphyX

> Если ты думаешь, что вся прелесть генту заключается в возможности "пересобрать фсё", ты ошибаешься. А в чём? В идее потырить freebsd'шные порты, толковую реализацию которой (как здесь модно говорить) ниасилили?

В голову приходит только: хорош для тех, кто хочет понять структуру системы, но для этой цели гораздо лучше подходит LFS.

Napkin
()
Ответ на: комментарий от Kuzmich

>Берём live-cd с sshd...

А CD-привод откуда возмётся ? ;))

Кстати с USB-флешкой такой номер у меня прокатывал но только консоль цеплялась не через сетку а через тот же самый USB (usbnet) потому как сеть при начальной загрузке не настроена.

sS ★★★★★
()
Ответ на: комментарий от sS

> Кстати с USB-флешкой такой номер у меня прокатывал но только консоль цеплялась не через сетку а через тот же самый USB (usbnet) потому как сеть при начальной загрузке не настроена.

dhcp настроить нынче проще, чем midnight commander.

Napkin
()
Ответ на: комментарий от Napkin

>В голову приходит только: хорош для тех, кто хочет понять структуру системы, но для этой цели гораздо лучше подходит LFS.

Для этого LFS подходит больше. Но прелесть Gentoo в другом - полная настройка системы под себя, это раз. Огромный оффициальный репозиторий + свежий софт, это два. А главный недостаток (необходимость ждать, когда все соберется) на такой машине вообще не должен ощущаться.

blaster999 ★★
()
Ответ на: комментарий от sS

>hint: вот пришёла тебе новая нода - почти голая (внутри в лучшем случае предустановленная вендором базовая система). Как ты будешь её в кластер вставлять и конфигурировать ? По ssh ? ;))))

Ясное дело. Не руками ж у нее стоять. man netboot, man netconsole во-первых, во-вторых например debian installer имеет ssh--server-module, чтоб по ssh удаленно ставить.

Zulu ★★☆☆
()
Ответ на: комментарий от blaster999

> Но прелесть Gentoo в другом - полная настройка системы под себя, это раз. Огромный оффициальный репозиторий + свежий софт, это два. А главный недостаток (необходимость ждать, когда все соберется) на такой машине вообще не должен ощущаться.

Всё, о чём ты говорил, есть практически во всех серьёзных репозиториях. Развечто настройка под себя обычно не принудительная.

Napkin
()
Ответ на: комментарий от htower_

>Ну что ты этим дятлам объясняешь ? Они ж не видели нифига, а только языком препаться умеют. Я сам в этом институте учусь (аспирантура) и этого админа знаю - нормальный парень без заскоков с "гипероптимизацией". Просто ему так проще и удобнее.

Вот собственно и объяснение этого "пионерского поступка" ;) Сэкономили на покупке нормального кластерного дистрибутива за деньги с поддержкой. А уйдёт этот админ-студент чего делать будете ?

sS ★★★★★
()

В будущем гента всех натянет! и будет считаться идеалом линукса

anonymous
()
Ответ на: комментарий от sS

Вообще-то говорилось только про отсутствие клавы и монитора ;)
Не будет CD, будем думать другой сбособ, например по BOOTP.

Kuzmich ★★
()
Ответ на: комментарий от sS

> А уйдёт этот админ-студент чего делать будете ?

Наймут следующего и он умрёт от приступа смеха когда увидит кластер на gentoo :)

Napkin
()
Ответ на: комментарий от Napkin

>В голову приходит только: хорош для тех, кто хочет понять структуру системы

то у тебя не голова, а явно другая часть тела

зы. озвучь свой стаж работы с gentoo что бы мы знали, не с треплом ли общаемся случаем

зыы. фрю ты наверное тоже ненавидишь?

anonymous
()
Ответ на: комментарий от blaster999

>У меня Gentoo стоит на 3х машинах, глюков нет. Может, дело в руках?

А, все понятно.

Zulu ★★☆☆
()

Неудивительно, что свежий софт работает быстрее старого. Та же fc6 работает быстрее fc4 или fc2.

Видимо админу действительно просто удобнее работать с gentoo. А может сложности с апдейтом были до fc6.

jackill ★★★★★
()
Ответ на: комментарий от Napkin

>dhcp настроить нынче проще, чем midnight commander.

dhcp будет работать на неподдерживаемой сетевой железяке ? Неплохо бы сначала загрузить её модуль который вендор любезно положил на CD

sS ★★★★★
()
Ответ на: комментарий от rcr_cremator

>чувак. предварительно тебе нужно сделать 
>ifconfig ... up; passwd; /etc/init.d/sshd restart

вьюноша, а ILOM просто так придумали?
нужен только serial-шнурок, чтобы прилепить management ip(ессно, всё это живёт в отдельном vlan)

anonymous
()

У гентушников сегодня праздник, студенты (интересно местный дворец пионеров участвовал?) генту на кластер установили. Не надо им мешать пусть порадуются, такое не часто бывает :-D

anonymous
()
Ответ на: комментарий от Napkin

>Наймут следующего и он умрёт от приступа смеха когда увидит кластер на gentoo :)

это хорошо. чем больше умрет быдлоламеров-дистрофанов тем лучше для отрасли. да и для них лучше, ибо все равно у них безрадужная перспектива работы дворником

anonymous
()
Ответ на: комментарий от Zulu

>Ясное дело. Не руками ж у нее стоять. man netboot, man netconsole во-первых, во-вторых например debian installer имеет ssh--server-module, чтоб по ssh удаленно ставить.

netboot уже может работать с IB ?

sS ★★★★★
()
Ответ на: комментарий от plm

> Перевожу на русский - ушел нормальный админ, и наняли троечника-студиоза, за обещание не выгонять, который понял, что "генту, это кр00то".

Перевожу на русский. Ушел студент троечник, который осилил только установку венды. Но так как венда на кластер не встала, он поставил федору. Но его место пришел нормальный админ, который вкурил что 8% производительности на кластере не лишние...

musha
()
Ответ на: комментарий от anonymous

> Желаете вступить и скомпелировать? Давай иди, уже, одмить смою генту (а сталобыть и слакваре) на 3 (!!) машинах.

Вас из школы выгнали, или вы сами сбежали из нее? Столько ошибок в небольшом предложении.

andreyu ★★★★★
()
Ответ на: комментарий от dmesg

> Вся фишка втом, что *не даст*. А вот чего точно даст - так это вагон глюков и мемликов. Вон даже мозилловцы крайне не рекомендуют собирать мозиллу с опциями, отличными от -O2 -march=1386. Появляются непредсказуемые лики...

А никто и не заставляет с -O3 собирать. Ну а про march вы глупость написали. Хотите сказать что использование набора команд pentium4 приводит к глюкам? И sse тоже мегаглючное расширение?

Вах! Какая новость! Intel печатает глюки! И AMD тоже! Все быстро побежали покупать 286!

musha
()
Ответ на: комментарий от anonymous

> то у тебя не голова, а явно другая часть тела

Сдристни, красноглазый.

> зы. озвучь свой стаж работы с gentoo что бы мы знали, не с треплом ли общаемся случаем

Представь себе: даже не задавался таким вопросом. Но сталкиваться приходится, когда всякие Кулибины наставят, да наделают там такого, что глаза на лоб лезут.

> зыы. фрю ты наверное тоже ненавидишь?

Фря не имеет ничего общего с джентой. Кроме, как я уже говорил, утащить у фри порты. А вариант "пересобрать", который ты, как я понимаю, хотел привести как нечто общее с фрёй, есть в большинстве открытых систем и дистрибутивов. И мне действительно жаль, что у freebsd падает размер комьюнити.

Napkin
()
Ответ на: комментарий от anonymous

> вьюноша, а ILOM просто так придумали? > нужен только serial-шнурок, чтобы прилепить management ip(ессно, всё это живёт в отдельном vlan)

ILOM разве кроме Sun'овских серверов ещё где-то есть?

anonymous
()
Ответ на: комментарий от sS

> dhcp будет работать на неподдерживаемой сетевой железяке ? Неплохо бы сначала загрузить её модуль который вендор любезно положил на CD

Вообще, на livecd и в инсталляторах сейчас принято пробовать загружать все доступные модули, а если уж какой-либо модуль требует дополнительных параметров или ядро вовсе не поддерживает какую-либо железку, то проще переконфигурировать инсталлер, добавить модуль и записать свой инсталляционный диск. Чесслово. Заодно со следующим модулем проблем таких уже будет.

Napkin
()
Ответ на: комментарий от musha

>Хотите сказать что использование набора команд pentium4 приводит к глюкам?

В применении к кластерам - может. Но не к глюкам а к ограничению функционала. Как пример -SSI на MOSIX

Если кластер гетерогенный (p4/athlon) то будут проблемы с миграцией процессов, собранных с различными arch на ноду с другой архитектурой, что ограничит масштабируемость задачи.

sS ★★★★★
()
Ответ на: комментарий от anonymous

B vного тут анонимусов пользуються гентой и работают или админят кластеры?

Чем меня добивает лор так это тем что это сборише анонимусов которые флеймят на те темы в которых совсем не шарят....

Ламерство ставить на кластер стандартный дистр без его доработки... Будь он хоть сто раз платный и с поддержкой...

А гента как раз доработку позволяет делать наименее болезненым образом.

alexxy
()
Ответ на: комментарий от Napkin

>Наймут следующего и он умрёт от приступа смеха когда увидит кластер на gentoo

Конечно, все знают, что кластеры нужно делать только на MS-DOS 6.22.

blaster999 ★★
()
Ответ на: комментарий от Napkin

>Вообще, на livecd и в инсталляторах сейчас принято пробовать загружать все доступные модули, а если уж какой-либо модуль требует дополнительных параметров или ядро вовсе не поддерживает какую-либо железку, то проще переконфигурировать инсталлер, добавить модуль и записать свой инсталляционный диск. Чесслово. Заодно со следующим модулем проблем таких уже будет.

система ставится только на управляющем узле и вычислительном. с первого вычислительного потом просто копируется на остальные узлы.

переход на Gentoo осуществлялся еще летом 2005 года. через полгода наростили число модулей до 17 (без проблем скопировали готовую систему). сейчас скопировали настроенную систему на новый кластер(с другой архитектурой) и отправили в emerge -e system; emerge -e world.

rcr_cremator
()
Ответ на: комментарий от Napkin

>Вообще, на livecd и в инсталляторах сейчас принято пробовать загружать все доступные модули, а если уж какой-либо модуль требует дополнительных параметров или ядро вовсе не поддерживает какую-либо железку, то проще переконфигурировать инсталлер, добавить модуль и записать свой инсталляционный диск. Чесслово. Заодно со следующим модулем проблем таких уже будет.

Да всё можно сделать. Но проще один раз поднять систему на такой железяке и забыть.

PS: IMHO заниматься подъёмом системы на специфичном кластерном железе это вообще не задача админа. Это вендор должен сделать при поставке системы. Если конечно нет денег на такую поддержку или система - самосбор то это уже другой вопрос ;) Как правда такой "игрушкой для админов" будут пользоваться ендлузеры не совсем понятно ;)

sS ★★★★★
()
Ответ на: комментарий от anonymous

> А как же русские физики? Куда смотрит Патрег? Русские физики теперь переходят на gentoo. Интересно на что перейдут пермские учителя информатики?

rezuq
()
Ответ на: комментарий от rcr_cremator

> система ставится только на управляющем узле и вычислительном. с первого вычислительного потом просто копируется на остальные узлы.

Секунду. Я не предлагал решение, а отвечал на вопрос. Возможности просто скопировать систему в условиях задачи не было.

Napkin
()
Ответ на: комментарий от dmesg

> Вся фишка втом, что *не даст*. А вот чего точно даст - так это вагон глюков и мемликов. Вон даже мозилловцы крайне не рекомендуют собирать мозиллу с опциями, отличными от -O2 -march=1386. Появляются непредсказуемые лики...

Далеко не факт что не даст. И в gentoo на кластере я не вижу ничего плохого и глючного . Gentoo и на спутниках стоит. Глде-то новость когда-то проскакивало. И вообще наигибчайшый дистриубутив.

Arceny ★★
()
Ответ на: комментарий от Napkin

>Секунду. Я не предлагал решение, а отвечал на вопрос. Возможности просто скопировать систему в условиях задачи не было. я про то что создавать свой LiveCD в таких случаях обычно нецелесообразно.

rcr_cremator
()
Ответ на: комментарий от Somewho

> мну ниасилил идею геморофилии :)

Gentoo юзаю давно. Очень хорошая система :) Кстати ты в МСК уже или всё ещё у нас в Б. ?

Arceny ★★
()
Ответ на: комментарий от blaster999

> Но прелесть Gentoo в другом - полная настройка системы под себя, это раз. Огромный оффициальный репозиторий + свежий софт, это два.

э... а что такое "настройка под себя"? и почему ты считаешь, что в других дистрибутивах нельзя "настроить под себя"?

еще вопрос: в каких дистрибутивах нет "свежего софта" и "огромного репозитория"?

Tai-Pan
()
Ответ на: комментарий от rcr_cremator

> я про то что создавать свой LiveCD в таких случаях обычно нецелесообразно.

Опять же, я предлагал всего-навсего подправить инсталлятор. Дел на пол часа при условии, что ты скрипт инсталляции видишь первый раз.

Napkin
()
Ответ на: комментарий от Tai-Pan

>э... а что такое "настройка под себя"?

USE-флаги

>и почему ты считаешь, что в других дистрибутивах нельзя "настроить под себя"?

USE-флаги специфичны для Gentoo и уникальны в своем роде.

>еще вопрос: в каких дистрибутивах нет "свежего софта" и "огромного репозитория"?

SuSE, Mandriva, Ubuntu и т.д.

blaster999 ★★
()
Ответ на: комментарий от Napkin

я все больше поражаюсь некоторыми товарищами с ЛОР.... скорее всего он имел в виду, что у него 3 машины дома и глюков нема...

а ты небось уже сбился со счета, сколько поднял машин на масдае?

Bart
()
Ответ на: комментарий от Arceny

> Gentoo и на спутниках стоит.

Что, неужели эти спутники и летают быстрее, нежели обычные их собратья? :-))

Deleted
()
Ответ на: комментарий от blaster999

>А данное сообщение - классический пример анонизма в масштабах ЛОРа

слушай, да забей ты на этих недоадминов или кто они там еще.... то, что они не поняли Gentoo или даже не ставили - это сугубо их дело. На вкус и цвет товарища нет.... и не обьяснишь ты им, что Gentoo - forever!

Bart
()
Вы не можете добавлять комментарии в эту тему. Тема перемещена в архив.