Выбор файловой системы

reiser, btrfs, _правильно_ созданный ext4. Остальные пролетают. Но все-таки лучше киллерФС.

Тебе нужны файлы или записи в них? Если второе, то лучше все-таки базу данных сделать. И искать будет однозначно быстрее, и файлов будет сотни, а не сотни тысяч, и бэкапы легче, и вообще всё.

reiserfs

reiser, скорее даже reiser4. Кастую Крона в топик :)

>При открытии директории с 50000 примерно файлов

«открытие» в смысле «получить информацию об каждом из файлов»? Это всегда будет медленно, 50000 stat-ов дёшево не обходятся. Правильнее всего отучить клиентов от «бровзеров», пусть открывают не каталоги а файлы и какую-то программу поиска, методами работы которой ты cможешь управлять.

Правильно. Хороший пример - squid. Он же не размещает все миллионы кешируемых файлов в одной директории, а создает двухуровневую структуру директорий: так и файл проще найти, да и readdir быстрее будет выполняться.

http://ygingras.net/b/2007/12/too-many-files:-reiser-fs-vs-hashed-paths

Дело в том что я не смогу создавать каталоги и подкаталоги. Ситуация у меня такая что это машина на которой ftp сервер крутится. Сюда подключается DVR и записывает каждые 5 секунд jpg файл размером 15к. И так этих файлов соберается через месяц сами понимаете. Потом мне нужно записать это все на DVD вот тут и начинаются проблемы. Открыть директорий, выбрать 4gb файлов чтоб добавить в nero. Это просто ппц. Каждая операция выполняется по часу и больше. Это не моя проблема конечно но мне нужно помочь сделать это. Я увидел что с виндой такое не возможно, поэтому и спрашиваю стоит ли попробовать с рейзером или вообще стоит покупать спец оборудование.

> Сюда подключается DVR и записывает каждые 5 секунд jpg файл размером 15к

по крону создавать каждый день поддиректорию yyyy.mm/dd, и символическую ссылку, к которой пусть и идет подключение... или не подходит?

...хотя, 24*3600/5... многовато, лучше еще и ./hh/

...зы, если это похожие изображения, было бы разумно их сжимать и по времени... хоть mencoder-ом

> ... Открыть директорий, выбрать 4gb файлов чтоб добавить в nero. Это просто ппц. ...

Генери при помощи mkisofs образ и пиши чем хочешь

Народ дело говорит - ReiserFS

На линуксе с 50к файлами в директории легко и непринужденно справляется даже ext3. Особенно если stat не делать. Со stat'ом это будет пара секунд, без stat - порядка половины секунды.

ext2

>Открыть директорий, выбрать 4gb файлов

Вот от этого и нужно избавиться. Пример: пишем всё в "./current", который есть ссылка на "./дата", для простоты настройки ftp сервера. Отдельная программа мониторит запись в текущий каталог (man inotify), и как только там наберётся нужный объём, создаёт новый ./дата, меняет ссылку ./current туда и начинает его мониторить. После этого ничего выбирать не нужно, for i in [0-9]*[0-9] ; do mkisofs ... $i && rm -rf $i ; done и только диски вставляй.

Всё же, подкаталоги внутри, вероятно, лучше посоздавать, т.к. 4G/15K=266666 файлов в корне диска всё равно удовольствие ниже среднего. Или запихнуть пачку jpeg-ов в один «видео»-файл, но это от задачи зависит, может быть неприемлемо.