LINUX.ORG.RU

Out of memory при zip -FF

 , ,


0

2

Здравствуйте, товарищи форумчане!

Возникла следующая проблема: Есть битый zip архив размером в 420 GB. Ресурс, на котором хранился файл сейчас недоступен и когда будет доступен (и будет ли вообще) - неизвестно. Речь идет о NYU Dataset v2. unzip распаковывает часть файлов (~1/50), но вскоре вылетает с ошибкой:

$ unzip -av nyu_depth_v2_raw.zip -d unpacked
error:  expected central file header signature not found (file #648103).
  (please check that you have transferred or created the zipfile in the
  appropriate BINARY mode and that you have compiled UnZip properly)
Пробовал восстановить zip'ом:
$ zip -F nyu_depth_v2_raw.zip -O nyu_depth_v2_raw_fixed.zip
Fix archive (-F) - assume mostly intact archive
Zip entry offsets appear off by 21208686680 bytes - correcting...
        zip warning: expected 2348751 entries but found 0
$ zip -FF nyu_depth_v2_raw.zip -O nyu_depth_v2_raw_fixed.zip
... # копируется куча файлов
Zip64 EOCDR found ( 1 450007575728)...
Zip64 EOCDL found ( 1 450007575784)...
EOCDR found ( 1 450007575804)...

zip error: Out of memory (zixnqddY) #имя файла в скобках - рандомное

В процессе восстановления временный файл (zixnqddY) растет в размере до 418 Gb, но после ошибки - удаляется.

Собственно говоря, нужно достать из архива как можно больше файлов. Если кто-то сталкивался с подобной проблемой, прошу помочь советом.

Ответ на: комментарий от anonymous

Файл не самый популярный. Нашел только на academictorrents, но там нет сидов.

paintrain
() автор топика

185.21.216.152:64434 85.141.67.239:8999 216.165.70.25:80

у меня качает с торрентов, по магнету

magnet:?xt=urn:btih:2b48551a335bc5fb6a06f6e7a1ab5d32ec263d27&dn=nyu_depth_v2_raw.zip&tr=http%3a%2f%2facademictorrents.com%2fannounce.php&tr=udp%3a%2f%2ftracker.opentrackr.org%3a1337%2fannounce&tr=udp%3a%2f%2ftracker.openbittorrent.com%3a80%2fannounce&ws=http%3a%2f%2fhoratio.cs.nyu.edu%2fmit%2fsilberman%2fnyu_depth_v2%2fnyu_depth_v2_raw.zip

правда сидов нет, но может появятся :)

Deleted
()
Последнее исправление: Deleted (всего исправлений: 2)
Ответ на: комментарий от paintrain

Либо внезапно починилось, либо дело в маршрутах. У меня файл http://horatio.cs.nyu.edu/mit/silberman/nyu_depth_v2/nyu_depth_v2_raw.zip качается, хоть и жутко медленно. Выкачать себе и сидить я его не могу, у меня столько места нет.

Скорость там ограничена искусственно. Если качать в несколько потоков, масштабируется чуть ли не линейно. По прогнозам скачивалки, займёт восемь дней, но это лучше, чем полгода при скачивании в один поток.

i-rinat ★★★★★
()
Последнее исправление: i-rinat (всего исправлений: 1)
Ответ на: комментарий от i-rinat

Да, где-то минут 30 назад файлы снова стали доступны. Качаю через торренты. Конкретно моя проблема, надеюсь (тьфу-тьфу), решилась, но вопрос про восстановление больших файлов zip'ом остается открытым.

paintrain
() автор топика
Вы не можете добавлять комментарии в эту тему. Тема перемещена в архив.