Распаковка zip-файла с использованием zlib

0

1

ну задам уже и сдесь...

Мне понадобилось программно создавать zip-архивы в которых лежали бы файлы с разной степенью сжатия.
Ни одна из библиотек которые доступны моему пониманию этого не позволяла :)
В результате я решил работать с форматом файла вручную.

Вооружившись википедией и спецификацией я научился разбирать структуру файла и распознавать все заголовки кроме расширенных (которые мне не нужны и я их пропускаю).

То что программа корректно путешествует по архиву и распознаёт имена фйайлов, говорит о том что я всё делаю верно...

Но теперь возникла проблема.
Содержимое секции с файлом не распаковывается с помощью zlib uncompress.
Я доставал содержимое в файл и пытался воспользоваться ZFile * gz = gzopen(...) - не получается.
На выходе распаковщика неизменно мусор.

Как zlib-ом распаковать файлы?

З.Ы. того что в minizip неосилил - слишком сложно, мне бы по рабоче-крестьянски.

З.Ы.Ы ну или посоветуйте простую в использовании библиотеку, которая позволяет создавать zip-архив в котором файлы с разным сжатием.

Ссылка

←	JFF: Подкиньте идей (web-боты и обработка изображений)

[c++] Быстрый способ запустить метод для каждого эл-та в vector

→

Тебе именно на Си? А то в Питоне есть уже готовые библиотеки (на крайний случай можешь посмотреть как там делается).

pacify ★★★★★
(12.04.11 23:57:23 MSK)

Ответ на: комментарий от pacify 12.04.11 23:57:23 MSK

Тебе именно на Си?

Да.

А то в Питоне есть уже готовые библиотеки (на крайний случай можешь посмотреть как там делается).

В Питоне уже сделал... года два назад :) Теперь нужно всё переписать на C. (в питоньих исходниках за горами обёрток ничего не понятно)

Си/Си++ осознанно занимаюсь чуть меньше года - нужно ОЧЕНЬ по рабоче-крестьянски :)

knkd
(13.04.11 00:04:12 MSK) автор топика

Ответ на: комментарий от knkd 13.04.11 00:04:12 MSK

а libarchive?

а libarchive не позволяет регулировать степень сжатия при создании архива?
Непонятно...

knkd
(13.04.11 00:06:28 MSK) автор топика

Ссылка

> Распаковка zip-файла с использованием zlib

боже, какая прелесть… а с libzip что не так?

arsi ★★★★★
(13.04.11 00:13:06 MSK)

Ответ на: комментарий от arsi 13.04.11 00:13:06 MSK

с libzip что не так?

А как ею в один архив файлы с разным сжатием засунуть?

knkd
(13.04.11 00:19:48 MSK) автор топика

Ответ на: с libzip что не так? от knkd 13.04.11 00:19:48 MSK

> Распаковка zip-файла с использованием zlib

> А как ею в один архив файлы с разным сжатием засунуть?

raise(SIGSEGV);

arsi ★★★★★
(13.04.11 00:32:46 MSK)

Ответ на: комментарий от arsi 13.04.11 00:32:46 MSK

raise(SIGSEGV);

З.Ы.Ы ну или посоветуйте простую в использовании библиотеку, которая позволяет создавать zip-архив в котором файлы с разным сжатием.

Если использовать стороннюю библиотеку - то она должна и совать и высовывать. Бо если запаковывать придётся ручками, то распаковывать лучше тоже ручками.

Я начал с распаковки...

knkd
(13.04.11 00:37:27 MSK) автор топика

Ссылка

Не ту функцию дергаешь. Надо или inflateInit2 + inflate, или inflateBack. Тебе же сырые данные распаковать надо, без всяких заголовков.

nanonymous
(13.04.11 00:41:27 MSK)

Ответ на: комментарий от nanonymous 13.04.11 00:41:27 MSK

Тебе же сырые данные распаковать надо, без всяких заголовков.

Опа... Я не знал что есть разница.
Спасибо, попробую.

knkd
(13.04.11 00:45:41 MSK) автор топика

Позырь здесь: http://osdab.42cows.org/snippets/zip.php?mode=advanced

В сами исходники не заглядывал, поддерживается ли запись файлов с разной степенью сжатия тоже не знаю. Чиста just in case.

anonymous
(13.04.11 02:38:32 MSK)

Ссылка

Ответ на: комментарий от knkd 13.04.11 00:45:41 MSK

Белки, или зайцы... кого в космос пускали, собак чтоли?

mrs
(13.04.11 06:48:54 MSK)

Ссылка

во первых, надо идти и читать описание формата ZIP (файл APPNOTE.TXT) в котором все описано... если используется deflate (а это только один из методов упаковки), то данные должны лежать без gz заголовка - для этого надо звать inflateInit2 с флагом -MAX_WBITS и затем звать inflate пока не кончатся данные.

Кроме того, не стоит забыват, что в Zip-файле данные могут быть в других форматах сжатия - bz2, lzma, ppmd, deflate64, shrink... Я бы перестал изобретать велосипед, и взял бы libzip - она из существующих одна из самых навороченных

И честно говоря, я не совсем понял задачу - зачем нужны разные степени сжатия?

ott ★★★★★
(13.04.11 10:24:23 MSK)

Ответ на: комментарий от ott 13.04.11 10:24:23 MSK

Запихивать в один архив данные, которые отлично жмутся, и данные, которые не жмутся вообще.

LamerOk ★★★★★
(13.04.11 15:55:54 MSK)

Ссылка

Ответ на: комментарий от ott 13.04.11 10:24:23 MSK

И честно говоря, я не совсем понял задачу - зачем нужны разные степени сжатия?

Традиционно... Для того чтобы первый файл в архиве был несжатый. В нём сидит описание. А всё от того, что некоторую информацию об пакете должны читать старые фортрановские либы, создатели которых умерли ещё до появления формата zip :)

Я бы перестал изобретать велосипед, и взял бы libzip

Увы... :(

если используется deflate (а это только один из методов упаковки), то данные должны лежать без gz заголовка - для этого надо звать inflateInit2 с флагом -MAX_WBITS и затем звать inflate пока не кончатся данные.

Спасибо. Проверяю.

knkd
(13.04.11 18:05:44 MSK) автор топика

Ответ на: комментарий от ott 13.04.11 10:24:23 MSK

>Я бы перестал изобретать велосипед, и взял бы libzip - она из существующих одна из самых навороченных

Я, например, хотел написать открывашку файла, который представляет собой запакованные zipом текстовые данные, и тащить ради этой открывашки лишнюю библиотеку в зависимостях сильно не хотелось бы.

dn2010 ★★★★★
(13.04.11 18:13:41 MSK)

Ответ на: комментарий от dn2010 13.04.11 18:13:41 MSK

Ну если специфических требований нет, то почему бы и нет?
libzip не такая уж и большая.
Я бы даже libarchive взял, для полной сухости и комфорта.

knkd
(13.04.11 18:27:01 MSK) автор топика

Ссылка

Ответ на: комментарий от knkd 13.04.11 18:05:44 MSK

У меня было ощущение, что там как-то это можно указать - сжимать или нет. В крайнем случае можно попробовать похакать исходный код

ott ★★★★★
(13.04.11 18:32:24 MSK)

Ответ на: комментарий от dn2010 13.04.11 18:13:41 MSK

написание корректной библиотеки работы с Zip'ованными данными - дело не одного дня (даже не недели)... у меня в текущей библиотеке 2500 строк кода, не считая инфрасткрутктурных вещей). Зачем тратить свое время на то, что уже сделали другие?

ott ★★★★★
(13.04.11 18:34:19 MSK)

Ссылка

Ответ на: комментарий от ott 13.04.11 18:32:24 MSK

У меня было ощущение, что там как-то это можно указать - сжимать или нет

Хорошо бы, но не найду никак...

Зачем тратить свое время на то, что уже сделали другие?

Хочу разное сжатие :( надо.

knkd
(13.04.11 18:52:59 MSK) автор топика

Ответ на: комментарий от knkd 13.04.11 18:52:59 MSK

ну я имел ввиду, что бывает легче похакать существующую библиотеку, чем переписывать ее с нуля

ott ★★★★★
(13.04.11 20:01:51 MSK)

Ответ на: комментарий от ott 13.04.11 20:01:51 MSK

ну я имел ввиду, что бывает легче похакать существующую библиотеку, чем переписывать ее с нуля

Для первого года знакомства с C/C++ исходники слишком сложны.

knkd
(13.04.11 20:26:06 MSK) автор топика

Ответ на: комментарий от knkd 13.04.11 20:26:06 MSK

для первого года знакомства, написание эффективной распаковки/упаковки тоже может быть сложным :-)

ott ★★★★★
(13.04.11 21:12:40 MSK)

Ответ на: комментарий от ott 13.04.11 21:12:40 MSK

для первого года знакомства, написание эффективной распаковки/упаковки тоже может быть сложным

А у меня есть выбор? :-(

Распаковка мне на самом деле и не нужна, могу воспользоваться любой из существующих библиотек.
Просто я хочу точно знать, что то что я запакую распакуется обратно :-)
Потому хочу проверить, что же там на самом деле происходит.

knkd
(13.04.11 21:34:33 MSK) автор топика

Ответ на: комментарий от knkd 13.04.11 21:34:33 MSK

ну тогда надо внимательно читать APPNOTE от unzip, RFC на deflate и документацию от zlib. Если будут вопросы, можете спрашивать по почте

ott ★★★★★
(13.04.11 22:07:24 MSK)

Ответ на: комментарий от ott 13.04.11 22:07:24 MSK

Всё работает. Вопрос с DEFLATE полностью решен.

Спасибо, ott.

knkd
(14.04.11 18:43:57 MSK) автор топика

Ссылка

Вы не можете добавлять комментарии в эту тему. Тема перемещена в архив.

←	JFF: Подкиньте идей (web-боты и обработка изображений)

Development

[c++] Быстрый способ запустить метод для каждого эл-та в vector

→

а libarchive?

с libzip что не так?

Похожие темы