Как не убить хард в хлам при закачке терабайтов торрентов? Есть ли возможность COW/кэширования?

в ktorrent есть опция «Fully reserve disk space»

http://drupal-admin.ru/blog/оптимизация-linux-под-нагрузку-кэширование-операц...

Ну в принципе даже торрент скачивания не убьют диск в хлам очень быстро, конечно если диск нормальный, думаю на 3-4 года вполне можно рассчитывать даже если качать/раздавать 24/7

P.S.Останавливать раздачу сразу после скачивания мало поможет, основной износ именно во время записи информации на диск, а считывание это не проблема)))

HDD же, а не SSD, ему пофиг, писать или читать.

Ну судя по всему не пофиг. В принципе в любом случае никак не угадать сколько диск протянет. у меня торрент и убивал диск в течении года. а были что и более 5 лет работали, так что важнее на сколько качественный диск вам попался, а не то что вы с ним делаете)))

Ну судя по всему не пофиг

«по всему» это по чему?

Ну когда то статью читал с тестами о износе диска, так там основная нагрузка на износ и появление битых секторов в основном происходит именно при записи информации, правда или нет я конечно проверить не могу, пришлось поверить на слово)))

Сережа, не прогуливай школу.

Либо еще вариант compressed ramdisk на базе zram например, чтобы побольше торрентов влезло, а с него уже по окончании закачки переносить на основной винт.

С торрентов качают, как правило, сжатое файло. Кино, музыка, zip/rar архивы. zram не поможет.

У меня встречный вопрос: как убить хард в хлам при закачке терабайтов торрентов? Нет, ну серьёно: как вы это делаете?

В моём домашнем сервере самые старые диски (терабайтные wd green) непрерывно работают уже 6 лет, судя по Power_On_Hours в выводе smartctl. Он непрерывно качает и раздаёт торренты. Раз в месяц raid6 полностью пересинхронизируется, никаких проблем нет.

Лично у меня вот такая бандура трудится над торрентами:

Model Family:     HGST Travelstar 7K1000
Device Model:     HGST HTS721010A9E630
Serial Number:    JG40006PGN3AYC
LU WWN Device Id: 5 000cca 6acc92402
Firmware Version: JB0OA3B0
User Capacity:    1,000,204,886,016 bytes [1.00 TB]
Sector Sizes:     512 bytes logical, 4096 bytes physical
Rotation Rate:    7200 rpm
Form Factor:      2.5 inches
Device is:        In smartctl database [for details use: -P show]
ATA Version is:   ATA8-ACS T13/1699-D revision 6
SATA Version is:  SATA 2.6, 6.0 Gb/s (current: 3.0 Gb/s)
Local Time is:    Tue Oct  6 10:59:43 2015 MSK
SMART support is: Available - device has SMART capability.
SMART support is: Enabled

Тут ещё неплохо бы дать определение того, что значит «начинает шуметь временами». Все жёсткие диски шумят. Причём шумят всегда и делают это неравномерно.

Шумит больше обычного, видимо, иначе не обратил бы внимания. Обычные звуки при чтении-записи отчётливо слышно только если приблизить ухо сантиметров на 20 к компу. Шум от механики слышно за пару метров, с рабочего места.

Звук похож не то на привод головок, не то на «журчание» старых дисков. Не знаю, серёдка наполовинку. Проявляется приступами, причём пару недель назад довольно активно проявлялся, несколько раз на день. Сейчас вернулся из отпуска, включил компьютер, но пока больше такого не слышал. Надо тесты прогнать, да.

COW усиливает фрагментацию.

Ждать когда большие SSD подешевеют.

У меня встречный вопрос: как убить хард в хлам при закачке терабайтов торрентов? Нет, ну серьёно: как вы это делаете?

Удваиваю вопрос. Ещё ни один диск под торрентами даже Current_Pending не повысил, не то чтобы умереть. А качаю я их с 2009го, как только в нашей деревне более-менее нормальные безлимиты появились.

А если нужен один файл из многотерабайтного торрента?

Так место выделяется не под раздачу, а под каждый файл.

Какой здесь COW, какая фрагментация, вы о чём?

чтобы в одно место писалось, только если 64+Мб беспрерывно уже есть

Крути настройки/сорцы клиента. Тот же uTorrent, вроде, такое умел.

Да, после скачки приостанавливаю раздачу, чтобы меньше диски изнашивались.

Ну ты и гадёныш.

Какой здесь COW

Прямо в названии. Тоже не понимаю, зачем.

харды греметь начинают (и у знакомых тоже)

По гарантии их, или на помойку.

Нормальный хард не должен начинать греметь.
Не перегревать, жестко закрепить, ...

Мой диск:

Model Family:     Western Digital Caviar Green (Adv. Format)
Device Model:     WDC WD20EARX-00PASB0

ID# ATTRIBUTE_NAME          FLAG     VALUE WORST THRESH TYPE      UPDATED  WHEN_FAILED RAW_VALUE
  1 Raw_Read_Error_Rate     0x002f   200   200   051    Pre-fail  Always       -       1
  3 Spin_Up_Time            0x0027   171   167   021    Pre-fail  Always       -       6416
  4 Start_Stop_Count        0x0032   100   100   000    Old_age   Always       -       191
  5 Reallocated_Sector_Ct   0x0033   200   200   140    Pre-fail  Always       -       0
  7 Seek_Error_Rate         0x002e   200   200   000    Old_age   Always       -       0
  9 Power_On_Hours          0x0032   064   064   000    Old_age   Always       -       26378
 10 Spin_Retry_Count        0x0032   100   100   000    Old_age   Always       -       0
 11 Calibration_Retry_Count 0x0032   100   100   000    Old_age   Always       -       0
 12 Power_Cycle_Count       0x0032   100   100   000    Old_age   Always       -       189
192 Power-Off_Retract_Count 0x0032   200   200   000    Old_age   Always       -       141
193 Load_Cycle_Count        0x0032   182   182   000    Old_age   Always       -       54802
194 Temperature_Celsius     0x0022   121   102   000    Old_age   Always       -       29
196 Reallocated_Event_Count 0x0032   200   200   000    Old_age   Always       -       0
197 Current_Pending_Sector  0x0032   200   200   000    Old_age   Always       -       0
198 Offline_Uncorrectable   0x0030   200   200   000    Old_age   Offline      -       0
199 UDMA_CRC_Error_Count    0x0032   200   200   000    Old_age   Always       -       0
200 Multi_Zone_Error_Rate   0x0008   200   200   000    Old_age   Offline      -       0

Из-за постоянного использования торрентов харды греметь начинают (и у знакомых тоже), видимо механика расшатывается.

Бобер, выдыхай. Торренты у него механику расшатывают...

Есть довольно древний HDD, гиг на 300. Разбит на несколько разделов. Заметные шумы слышны при обращении только к одному из разделов. Так было с самого начала и продолжается до сих пор.

Покупаешь красный WD на 3TB, обеспечиваешь ему охлаждение с помощью карлсона мелкого от старой видюхи, например, и пользуешься.

Если не допускать нагрева выше 45-50, то служить будет верой и правдой годами.

Raw_Read_Error_Rate 1
Power-Off_Retract_Count 141

Это так удачно питание пропало?

Это так удачно питание пропало?

Да было просто кабели выдергивал. Да и какое-то время без UPS работал.

конечно если диск нормальный

Нет, не SAS, только говнище на SATA.

P.S.Останавливать раздачу сразу после скачивания мало поможет

Это HDD, а не SDD: у него не ячейки изнашиваются, а механика головки.

P.S.Останавливать раздачу сразу после скачивания мало поможет, основной износ именно во время записи информации на диск, а считывание это не проблема)))

Тогда сначала качать torrent на tmpfs, а потом уже перемещать на диск.
Ну и естественно перед этим прикупить побольше рама.
(Я так и делал, но только мотивироал борьбой с дефрагментацией, а тут ещё вон какой профит есть, оказывается)

(терабайтные wd green) непрерывно работают уже 6 лет

OH, SHIT!!! Немедленно переносите данные на новые диски и молитесь, чтобы они не умерли при переносе. WD green - это то ещё дерьмище, у нас на работе как-то юзали, так 70% уже вышло из строя.

Тогда сначала качать torrent на tmpfs, а потом уже перемещать на диск.

Вы все тред не читаете, да? Я уже писал об этом, и сказал, что не влезет.

Скоро 2 года как, и механика начинает шуметь временами. Тесты прогнать, что ли.

Вы хотели сказать «бекапы»?

Так у тебя же вроде есть приличная работа, купи супермикро и на него гигов 128.

начинает шуметь временами

Опытный админ не только слышит, когда диск начинает шуметь механикой, а даже когда он в простое переключается в режим сканирования и реаллокейта.

Как разница, если сам торрент может быть на 450 гигов? Мейнфрейм купить?

Вы судорь слегка упороты, у меня примерно такое же время работают грины(7шт) на 2.5TB в raid6 и всё ок, никаких бэд блоков.

Возможно вы парковку головки не отключали?

Отключал, отключал. Это Вы упороты: raid6 на гринах делать. Ещё скажите, что там корпоративная БД крутится.

Нет, файлопомойка. Это домашний сервер. А что в raid6 плохого? 6 дисков на массив + 1 хот спайр. по моему очень стабильно и надежно (с).

а если про бд говорить, у нас всё на ssd и местами в памяти. Hdd не катят вообще для нормальной нагрузки.

WD green - это то ещё дерьмище, у нас на работе как-то юзали, так 70% уже вышло из строя.

До сих пор не слышать про таймаут парковки на wd green - надо быть эталонным страусом и ССЗБ.

У WD green и red с надёжностью всё прекрасно. Если у владельца в голове не только кость

Да знаю я про парковку. Это не отменяет то, что они - дерьмо.

Есть ли какой-нибудь вариант агрессивного кэширования записи

Не ты первый с похожими идеями: http://www.nimblestorage.com/blog/technology/a-comparison-of-filesystem-archi...

Если не допускать нагрева выше 45-50, то служить будет верой и правдой годами.

Надо ещё не допускать охлаждения ниже 35, и тогда вообще хорошо будет.

Да, после скачки приостанавливаю раздачу, чтобы меньше диски изнашивались.

Ну ты и гадёныш.

Плюсую.

Это был сарказм?

Таймер парковок достаточно отключить.

Это был сарказм?

Нет.

При температурах ниже 35°C увеличивается шанс отказа: https://research.google.com/archive/disk_failures.pdf

Нет.

Очень похоже было.

При температурах ниже 35°C увеличивается шанс отказа

Интересно. Не знал про такую статистику.

Очень похоже было.

Да, есть такое. Никак не могу избавиться.

Все участники этой ветки честно заслуживают лет по семь турмы. Ибо у каждого террабайты ворованного контента. Воришки нищебродные.