LINUX.ORG.RU

Архиватор с поддержкой Snappy


0

1

Добрый день, господа!

Подскажите, существует ли архиватор с поддержкой Snappy? Крайне важна скорость сжатия, коэффициент не важен.

Для теста скомпилировал этот кусок кода и был приятно удивлен скоростью сжатия, dd дамп диска на 80Gb - 16 минут, против 37 у lzop, который я использую сейчас. Поэтому хотелось бы полностью перейти на snappy.


а сколько на gzip -1 выдаёт? по идее на таких алгоритмах ты в скорость диска упрёшься а не в производительность процессора

zolden ★★★★★
()
Ответ на: комментарий от zolden

Snappy быстрее

# mkdir -p /tmp/tmpfs
# mount -t tmpfs none /tmp/tmpfs
# #Try gzip -1
# dd if=/dev/vms/sks conv=sync,noerror bs=64K | gzip -1 -c > /tmp/tmpfs/vms.sks.img.gz
  81920+0 records in
  81920+0 records out
  5368709120 bytes (5.4 GB) copied, 39.5284 s, 136 MB/s
#
# #Try snappy
# dd if=/dev/vms/sks conv=sync,noerror bs=64K | ./a.out > /tmp/tmpfs/vms.sks.img.snap
  81920+0 records in
  81920+0 records out
  5368709120 bytes (5.4 GB) copied, 6.92275 s, 776 MB/s
mihbel
() автор топика
Ответ на: Snappy быстрее от mihbel

Я понимаю, что snappy быстрее на абстрактном железе и на абстрактных данных.
Но у тебя то винт, наверно, не абстрактный, а железно-кремниево-стеклянный.
Реальная задача какая?
Писать 80Гб дампы в память?

zolden ★★★★★
()
Ответ на: комментарий от zolden

Да нет, не в память, а на другой raid, но snappy и snzip оказываются быстрее на реальном железе, причем значительно.

mihbel
() автор топика
Ответ на: комментарий от Lavos

Вот за snzip спасибо, то, что нужно. Кроме того есть поддержка snappy, но «родной» формат snz оказался самым быстрым для моих задач.

mihbel
() автор топика
Вы не можете добавлять комментарии в эту тему. Тема перемещена в архив.