[Сетевые ФС] Аналог RAID по сети

GEOM Gate

1. Раздел - это «сырой» раздел или раздел с файловой системой?
2. При вылете скольки хостов данные должны оставаться доступны?
3. Среда гомогенная (все линуксы) или гетерогенная (не только линуксы)?
4. Распределенным ресурсом должен пользоваться только линукс, или не только линукс?

> GEOM Gate

А если дисковые «серверы» это две винды, один линукс и два соляриса, а дисковым клиентом линукс и винда, и «шариться» ФС должна параллельно на несколько клиентов?

А вообще, я бы наверное сказал что проще всего решить проблему с помощью MS DFS :-)

1. - без разницы, ка нужно так и сделаю 2. - половина. Хостов - 50 штук 3. - все линуксы (разные) 4. - только линукс

Последний вопрос, самый важный - итоговая распределенная ФС должна быть доступна одновременно для нескольких клиентов, или всегда будет использоваться эксклюзивно строго одним клиентом?

Заранее отвечу - в первом сценарии скорее всего нужна coda или ocfs2. Во втором возможны варианты

Она должна быть полностью распределённая или же допускается наличие центрального контроллера разруливающего коллизии?

Наличие сервера возможно. Хотелось бы конечно чтоб клиентов было несколько, но в принципе и монопольно возможно если подумать...

Смысл то в чем. Просто обидно что на каждом компе совершенно без дела лежат от 30 до 100 гигов свободных...

Юзай какой-нить hadoop, tahoe(он тормоз из-за шифрования) итп. Заодно и резервирование оно обеспечивает.

поюзал сейчас tahoe - вроде работаеть но без монтирования както не айс ((

>А если дисковые «серверы» это две винды, один линукс и два соляриса, а дисковым клиентом линукс и винда, и «шариться» ФС должна параллельно на несколько клиентов?

«Проблемы негров шерифа не волнуют».

>Так чтобы файлы хранились сразу на нескольких компах

А что за файлы? Ели пор^W мультимедийные данные по принципу «один раз записал - много раз читать», то это одно. А если это локальная файлопомойка, с относительно важными данными и «по принципу много пишут - много читают», то это совсе другое.

Одно время были исследовательские проекты Oceanstore (у него даже вроде как есть коммерческое воплощение) и Coral CDN. Наверно все-таки тебе надо именно это.

Там аж три реализации через fuse :). Причём, кажись, все три нерабочие... Но можно каку-нить из них починить.

>«Проблемы негров шерифа не волнуют».

Только негр в данном случае ты, со своим непортируемым геомом :-)

читайте больше про дрбд =)

glusterfs может быть

можно iscsi и на серваке собрать raid из сетевых дисков, но стоит ли забивать локальную сеть

http://en.wikipedia.org/wiki/List_of_file_systems#Distributed_file_systems

Distributed parallel fault-tolerant file systems

ms dfs не параллел

GlusterFS с afr поверх любой файлухи с user_xattr, остальное велосипеды. Мануал на сайте вкури и вперед.

Пробовал заводить hadoop, а потом через фусе(+бубен) его маунтить.
В принципе работает, на мелких файлах скорость на запись никакая (но это особенность хадупа).
Не умеет локи.
А так в принципе работает.
Плюсы:
лекгость добавления нодов.
контоллируемая избыточность.
возможность плинорования отключения нода.
Минусы:
возня с фусе драйвером (в принципе работает, но нужно дев-пакеты ставить, на тестовой бубунте не их было)
требуется центральный мастер,который является single point of failure, хотя и есть возможность его репликации.
маленькая скорость на мелких файлах, даже когда все ноды на локал хосте.
нет локов, поэтому для файлопомойки годится, а для софта - не факт смотреть нужно.

Думал не тему, что если сделать еще поверх NFS(умеет ли нфс локи сама по себе?), но поленился.

Мне хадуп показался образцом «как не надо писать ПО» и доказательство тормознутости явы :). Но некоторым нравится и разворачивается просто если знать нюансы. У меня тестовый кластер из 3-х нод минут пять поднимался. Так и не понял почему, в логах чисто.

Модуль fuse ужасный, его даже собрать не так просто. А ещё тесты не проходили на его файлухи, оно там совсем глючное. Не только блокировок нет, там много чего нет(напр. mmap).

Тестил 0.20.1

Да, зря я хадуп порекомендовал...

Похоже gluster самое оно - даже в дебиане (тестинге) есть (правда старая версия, самосбор сильно лучше).
Там единственно гемор с синхронизацией клиентов, но если для небольшого использования - то лучше NFS поверх замутить - и будет щастье.

Единственное, что смущает, так это то, что чуваки говорят используйте 10Гбит для лучшего перфоманса, но на 100 Мбит тоже обещают, что будет работать.

Спасибо.

Вообще, надо бы обзор всех этих файлух сделать...