LINUX.ORG.RU
ФорумTalks

Философский вопрос о ХОЛОДНОМ хранении данных

 


1

3

Почему философский? Потому что он задается не с целью вот прям щас побежать и купить или собрать на коленке, а просто понять трынденцию и как другие люди поступают в такой ситуации. В общем конкретики нет, только лишь мысли в стиле «а неплохо бы». Итак допустим есть некие полезные данные в большом (по сегодняшним меркам) объеме допустим >1TB но <100TB.

1. Это НЕ бэкап и скорость развертывания или обновления до актуального большой роли не играет.
2. Это разнородный формат и не одним файлом. Например куча видео а еще куча пдфок а еще полно архивов. В общем чего угодно вообще, не важно
3. Доступ Рандомный. НО и это важно - довольно редкий. Один конкретный файл может понадобиться через год, другой через месяц, но никогда не будет так, что всё понадобится разом в одно время (как бывает с бэкапами).
4. В связи с этим нет никакой нужды хранить это «на горячую». То есть хранить на жд в компе это отнимать место для того что понадобится гораздо чаще, НАС это бесполезная трата электричества будет, а если его выключать, то бесполезная трата физического места и денег.
5. Полная локальность, без участия 3 лиц в доставке, храненении и доступе к этим данным, поэтому любые облачные стоила идут на йух решительно строем.

То есть по сути консервы из инфы такие, на долгие годы, только иногда можно добавлять новое или стирать ставшее окончательно ненужным. Раньше этот вопрос идеально решали dvd-r стопками, но потом их стало мало. Жесткие диски в отключенном виде гораздо капризней к условиям хранения, занимают больше места, стоят сильно дороже чем болванки и внезапно менее надежны. Блюрей? Во первых все еще не дотягивает по объему, а одна болванка стоит уже сильно дороже. Вопрос в этом и заключается - что сейчас при таких объемах данных может сгодиться для ХОЛОДНОГО локального хранения - быть относительно дешевым, не занимать много физического места и надежным в условиях хранения? Кто как этот вопрос для себя решает или есть мысли на тему как можно решить

ЗЫ Кому НИНУЖНА - тот проходит мимо в другие треды.

ЗЫ2 пока что нашел только одну архивную систему для ХРАНЕНИЯ это Hitachi Content Platform (да, заявлется именно упор на хранение и редкий доступ к неструктурированым данным), а хочется найти настоящее холодное хранение ипических объемов данных.



Последнее исправление: justin_case (всего исправлений: 1)
Ответ на: комментарий от Syncro

на алике есть даже 64тб за 2700, но надо уточнять наверное, лет 3-5 назад мне 1ТБ за несколько тыщ оттуда казался на грани разводняка, а они работают нормально до сих пор

Конечно есть. Кретины же покупают, почему бы и не продавать. Ставлю деньги, что записать и потом считать 64тб с такого диска тебе никогда не удастся.

hateyoufeel ★★★★★
()
Последнее исправление: hateyoufeel (всего исправлений: 1)
Ответ на: комментарий от hateyoufeel

Sony делают специальные Bluray диски для архивов. 100Гб на диск, заявленный срок хранения >50 лет.

Про CD тоже такое говорили, но оказалось враки

Psilocybe ★★★★
()
Ответ на: комментарий от Psilocybe

Sony делают специальные Bluray диски для архивов. 100Гб на диск, заявленный срок хранения >50 лет.

Про CD тоже такое говорили, но оказалось враки

Ссылку? Я не помню прямо таки архивных CDR с такими заявками.

hateyoufeel ★★★★★
()
Ответ на: комментарий от hateyoufeel

ну по крайней мере сама по себе идея использовать usb выглядит готовой для реализации масштабируемого решения хоть своими руками, хотя с практической точки зрения у меня с этим видом подключения связан скорее негатив в плане надежности

Syncro ★★★★★
()
Ответ на: комментарий от justin_case

Лента хорошо для таких вещей, но уж больно дорого сами устройства.

В 90ые пытались в цифровые видеокассеты, на толстый бетакам влезало ~25 гигов видео, что твой Blu-ray. Но тогда аналоговые кассеты актуальнее и практичнее были, а потом сразу пошла оптика и флэшки... был бы у арвида формат не настолько примитивный, влезало бы сопоставимо. На копеечный VHS именно. Но увы не сложилось.

yu-boot ★★★★★
()
Ответ на: комментарий от Syncro

ну по крайней мере сама по себе идея использовать usb выглядит готовой для реализации масштабируемого решения хоть своими руками, хотя с практической точки зрения у меня с этим видом подключения связан скорее негатив в плане надежности

Да нет, это всё очень тупая идея. Ты как всегда полную херь пишешь.

@Psilocybe

В бумажной компъютере точно такое было

Ну ты бы ещё газету с анекдотами в качестве аргумента привёл лмао

hateyoufeel ★★★★★
()
Последнее исправление: hateyoufeel (всего исправлений: 1)

Ну судя по предьявляемым условиям , лента. Насчет бюджета ТС ничего не сказал. Стример можно купить б/у если для дома.

psiman
()

Как ни странно это звучит - но рулят DVD диски.

Да, они подвержены утере данных ...но, а что не подвержено? А по ТАКОЙ цене мы можем хранить в разных местах три, а лучше пять ОДИНАКОВЫХ копий информации в архивах. Ошибки у дисков возникают в разных местах, поэтому получив ошибку при чтении одного диска, просто вставляем второй, третий и т.д. И, если параноя не утихнет, каждый год делаем еще одну копию.

shTigrits ★★★
()

4 и 5 противоречат? Только локально, но чтоб место не занимало.

А вообще, купи ещё один-два HDD и складируй туда.

kardapoltsev ★★★★★
()
Ответ на: комментарий от shTigrits

Ошибки у дисков возникают в разных местах, поэтому получив ошибку при чтении одного диска..

Мы получим огромную головную боль собирая по частям битый файл

kardapoltsev ★★★★★
()
Ответ на: комментарий от kardapoltsev

С чего вдруг? Файл не надо собирать, еще раз пишу - при возникновении ошибки копирование «встает на паузу», двдюк меняется, копирование продолжается с этого же места.

shTigrits ★★★
()
Ответ на: комментарий от hateyoufeel

если выбирать между лентами, оптическими дисками и усб я бы таки выбрал последний вариант, все-таки не такая фантастика само по себе, и диски можно выбрать какие угодно

Syncro ★★★★★
()
Ответ на: комментарий от Syncro

если выбирать между лентами, оптическими дисками и усб я бы таки выбрал последний вариант, все-таки не такая фантастика само по себе, и диски можно выбрать какие угодно

Да-да, мы уже поняли, что ты выбираешь всякое говно.

hateyoufeel ★★★★★
()
Ответ на: комментарий от anc

Так её легко прочитают тогда. А тут с, не знаю, сотню таких строчек секретных в запароленном зипе - читай на здоровье.

yu-boot ★★★★★
()
Ответ на: комментарий от yu-boot

Прочитать можно, но зачем у вас на окне написано «сорок тысяч обезьян...» не каждому понятно.

anc ★★★★★
()
Ответ на: комментарий от hateyoufeel

оптические диски накануне их исчезновения из массовой продажи у меня запарывались сразу прямо после записи, не говоря уже о царапинках. Лента, скорее всего, такая же грусть только задорого.

Syncro ★★★★★
()
Ответ на: комментарий от Syncro

оптические диски накануне их исчезновения из массовой продажи у меня запарывались сразу прямо после записи, не говоря уже о царапинках.

Потому что руки надо из плеч иметь.

Лента, скорее всего, такая же грусть только задорого.

Скорее всего, да. Поэтому лента – это сейчас эталон долговременного хранения данных. Аж целые склады ей забиты. Но @Syncro с ЛОРа не осилил и считает, что USB-дисков с алихи хватит каждому!

hateyoufeel ★★★★★
()

У меня внешний диск сигейт на 1тб живёт уже более 10 лет. Живой по смарту. Подключаю его к компу раз в месяц закидываю стопку файлов и на полку опять. Все проще раз в 10 лет новый диск купить и на него все переместить.

ck80
()
Ответ на: комментарий от hateyoufeel

Поэтому лента – это сейчас эталон долговременного хранения данных. Аж целые склады ей забиты.

ну я застал те времена когда популярно было перематывать кассеты фломастером, а диски считались более «вечными» чем кассеты, поэтому, как ни крути, лента для меня всегда будет выглядеть оригинальным решением.

Syncro ★★★★★
()
Последнее исправление: Syncro (всего исправлений: 1)

Раньше этот вопрос идеально решали dvd-r стопками

И через лет 5-7 их можно смело отвозить в утиль. Не держат они данные, увы.

Не слышал, чтобы cd/dvd использовали в этих целях (ну, кроме личных нужд)

ergo ★★★
()
Ответ на: комментарий от Syncro

оптические диски накануне их исчезновения из массовой продажи у меня запарывались сразу прямо после записи

Дык для этого и проверяем после записи.

не говоря уже о царапинках.

Вроде в топике речь про бэкапы, а не про повседневное использование одной и тойже болванки.

anc ★★★★★
()
Ответ на: комментарий от anc

Дык для этого и проверяем после записи.

Вроде в топике речь про бэкапы, а не про повседневное использование одной и тойже болванки.

они стали очень дешевыми и очень хрупкими, эрка стоила рублей 6, рвшка 15, поцарапаться могла от недостаточно четкого укладывания в лоток, т.е. хоть при первом использовании. Тут надо еще понимать, что в отличии от NAS или самопального варианта с юсб на болванках или кассетах не сделаешь автоматизированное расширяемое решение если предполагается их менять.

Ну и как тут пояснили, они портятся и просто от времени, это уже доказанный факт. Да, наверное, если взять подороже сможет протянуть подольше, вообще любая электронная память является временной, поэтому выход кажется только в том что-бы постоянно мигрировать на новые носители храня данные с резервированием. Кстати, поидее это можно делегировать какому-нибудь яндексу, у них 100 тб за несколько сот. руб./мес. (кажется это все-таки было промо предложение), что возможно выйдет дешевле. Теоретически можно организовать п2п облако на разных устройствах с помощью syncthing, но на практике у меня такой вариант не очень гладко работает.

Syncro ★★★★★
()
Последнее исправление: Syncro (всего исправлений: 1)
Ответ на: комментарий от justin_case

Да я уже понял что нужно что-то нестандартное, экзотическое и эксклюзивное чтоб никакувсех. 😊

Ну как вариант можно конвертить в qr-коды, печатать и ламинировать. Будет надёжно, медленно и геморройно.

frunobulax ★★★
()
Ответ на: комментарий от ergo

Раньше этот вопрос идеально решали dvd-r стопками

И через лет 5-7 их можно смело отвозить в утиль. Не держат они данные, увы.

Зависит от болванок. RW-ки те точно «дохнут» от времени. Норм R-ки вроде нет... ну почти нет...

Не слышал, чтобы cd/dvd использовали в этих целях (ну, кроме личных нужд)

Целые стораджи с ченджерами давно именно под это дело продаются.

anc ★★★★★
()

Что значит НАС это бесполезная трата физического места
Ты что землю арендуешь что у тебя места нет или в сартире живёшь 2на2?

Для хранения ленточные накопители. В РФ есть магаз
Составляешь список файлов, помечаешь накопитель. Когда надо подключаешь его.

Xant1k ★★
()
Ответ на: комментарий от Syncro

Ну и как тут пояснили, они портятся и просто от времени, это уже доказанный факт.

Портиться любой носитель.

поэтому выход кажется только в том что-бы постоянно мигрировать на новые носители храня данные с резервированием.

Об этом и речь в целом. Не использовать инкремент «от времен царя Гороха».

anc ★★★★★
()
Ответ на: комментарий от Syncro

ну я застал те времена когда популярно было перематывать кассеты фломастером

А членом перематывать кассеты не популярно было?

hateyoufeel ★★★★★
()
Ответ на: комментарий от hateyoufeel

ну я застал те времена когда популярно было перематывать кассеты фломастером

А членом перематывать кассеты не популярно было?

Вот ниразу не смешно. Вы даже не поняли о чем написал Syncro. Только нюанс, возможно он в какой-то художке учился, раз постоянно фломики носил с собой. Так-то большинство на обычной шариковой ручке перематывало.

anc ★★★★★
()
Ответ на: комментарий от anc

Портиться любой носитель.

да и в случае с usb вы легко его меняете на практически что-угодно, а другие варианты грозят от неоправданной дороговизны до невозможности меинтейнить такое решение

Об этом и речь в целом. Не использовать инкремент «от времен царя Гороха».

лента это принципиальна хтонь, такое барахло часто пытаются выдать за узкоспециализированное решение

Syncro ★★★★★
()
Ответ на: комментарий от Syncro

....а другие варианты грозят от неоправданной дороговизны до невозможности меинтейнить такое решение

ЯННП Поясните плиз.

лента это принципиальна хтонь, такое барахло часто пытаются выдать за узкоспециализированное решение

Ну «лент» и разных существовало много, так что тоже обобщать нельзя, но у них у всех одна «родовая травма», это факт.

anc ★★★★★
()
Ответ на: комментарий от anc

ЯННП Поясните плиз.

ну вот завтра эти ваши диски или ленты попадут в списки неимпортируемой продукции, туда говно не попадает, но все таки допустим такое случится, китайцы такое барахло наверняка тоже делать не будут. Кроме того, они всегда могут исчезнуть практически полностью естественным путем. Всеж в облаках теперь.

Syncro ★★★★★
()
Ответ на: комментарий от Syncro

ну вот завтра эти ваши диски или ленты попадут в списки неимпортируемой продукции

Продуем пыль с коробок со старыми дискетами и запустим старый магнитофон.

anc ★★★★★
()
Ответ на: комментарий от Syncro

Всеж в облаках теперь.

А облака на облачных носителях крутятся?

anc ★★★★★
()
Ответ на: комментарий от anc

дискеты это ведь тоже такой носитель, которому в большинстве случаев приходил женский половой орган практически сразу после первой записи? причем чем большего размера была дискета, тем меньше информации на нее умещалось

Syncro ★★★★★
()
Ответ на: комментарий от Syncro

дискеты это ведь тоже такой носитель, которому в большинстве случаев приходил женский половой орган практически сразу после первой записи?

Нет, не в большинстве.

причем чем большего размера была дискета, тем меньше информации на нее умещалось

Это да.

anc ★★★★★
()
Ответ на: комментарий от anc

ну сначала не в большинстве, может быть, но технологии ведь не стоят на месте, отчетливо помню, что если вы переносите данные на > 3-5 носителях, шанс запороть весь процесс из-за испортившейся одной из них стремился к 1це

Syncro ★★★★★
()
Ответ на: комментарий от Syncro

Это да! Чем дальше ехать, тем больше копий! Золотое правило. Собстно оно и сейчас в некотором роде таким же и осталось.

anc ★★★★★
()
Ответ на: комментарий от anc

Зависит от болванок. RW-ки те точно «дохнут» от времени. Норм R-ки вроде нет… ну почти нет…

Были ещё экзотичные DVD-RAM в защитных картриджах (100500 перезаписей, 30 лет хранения) ©.

quickquest ★★★★★
()
Ответ на: комментарий от Syncro

Verbatim 100 шт 3000 рублей на озоне. Вроде такие до сих пор читаются. Правда 100 шт писать охренеешь... Кстати заводские DVD - которые с дровами от мамок и прочих железок, читаются не в пример стабильнее. И оборудование не такое уж и очень сильно дорогое. Зато результат читается на любой кофемолке, в отличие от перфокарт и лент.

Вот, кстати, можно обсосать идею 1) как писать на двд с резервированием для гарантированного восстановления. 2) Реинкарнацию перфокарт - принтер с а-ля-QR-кодом на листе А4. при 300 dpi один листок 26,4Кb. Распечатываем фотографию и в альбом.

shTigrits ★★★
()
Ответ на: комментарий от shTigrits

Зато результат читается на любой кофемолке, в отличие от перфокарт и лент.

так уже лет 10 назад можно было прочитать только откопав внешний с тем же usb, какая уж там кофемолка..

И оборудование не такое уж и очень сильно дорогое.

лучше сразу станкостроительный завод построить, хоть может промышленность приподнимете или опыт получите

Syncro ★★★★★
()
Ответ на: комментарий от Syncro

За себя говорите. Около меня сейчас их более пяти. А по теме... Ну попробуйте откопать вместо ДВД стример на ленту.

shTigrits ★★★
()

Если доступ по одному файлу - пленка и дефрагментация.

upcFrost ★★★★★
()
Ответ на: комментарий от Syncro

дискеты это ведь тоже такой носитель, которому в большинстве случаев приходил женский половой орган практически сразу после первой записи

Нет, не приходил. После пары сотен записей и десяти лет в коробке - да, возможно

upcFrost ★★★★★
()
Ответ на: комментарий от bloodmeri

Оптические диски боятся сырости , солнечного света , царапин …

Кто их не боится?

Храни их в непрозрачных футлярах и всё будет хорошо.

hateyoufeel ★★★★★
()
Закрыто добавление комментариев для недавно зарегистрированных пользователей (со score < 50)