LINUX.ORG.RU

Быстро перенести(скопировать) мегадиректорию


0

1

Есть папка. В ней 160 гиг мелкого 1-2 килобайтного файла + немереянно вложенных папок.

Нада скопировать на другой сервер. Быстро.

Подмонтировал на сервер с файлом папку с пустого сервера через нфс.

В восемь вечера пустил в скрине копировать. В семь утра зашел - копирует до сих пор.

Есть варианты как можно быстро скопировать?

Ответ на: комментарий от I00matolog

если вы монтируете ФС через сеть, то для каждого файла будет очень большой размер служебного траффика и задержек для обмена этой информацией по сети, при этом передача самих файлов будет быстрой, но займет меньшую часть всего времени копирования, т.е. время на NFS тратится на то чтобы перечитывать списки файлов в каталоге, аттрибуты файлов и т д...

tar сделает все это локально

Sylvia ★★★★★
()
Ответ на: комментарий от Sylvia

ок. я сделал как вы предложили

на сервере источнике в скрине

root@srv-2-0:/export/sdb1# tar -c mega_folder/ | gzip | nc -l -p 9999

на сервере назначения

root@srv-2-1:/export/sdb1# nc 10.10.10.2 9999 | gzip -dc | tar -x mega_folder/

запустил.

в папке на сервере назначения - пусто.

I00matolog
() автор топика
Ответ на: комментарий от I00matolog

дебилушка, перед запуском команд почитай что они делают.

1. ппрепутал netcat приемник/отправитель

2. ман nc — некоторые версии nc не принимают -l и -p опции одновременно

anonymous
()
Ответ на: комментарий от Sylvia

тестовую папку перелило шустро ..очень)).

только почемуто в скрине не остановило процесс root@srv-2-1:/export/sdb1# nc 10.10.10.2 9999 | gzip -dc | tar -x на сервере назначения.

I00matolog
() автор топика
Ответ на: комментарий от Sylvia

>netcat почему-то

почему-то? ЛОЛ, детский сад, мля

man nc, опция -q

anonymous
()

Я бы rsync-ом копировал, если обрывы будут, он нормально восстановится, сам будет сжимать (может не лучшим образом, но если связь между серверами нормальная, то сильное сжатие может только замедлить процесс передачи).

Legioner ★★★★★
()
Ответ на: комментарий от partyzan

туда, кстати - даже маршрутеры не ходят..я их еле нашел с жопэесом

I00matolog
() автор топика
Вы не можете добавлять комментарии в эту тему. Тема перемещена в архив.