Назад | Перейти на главную страницу

Резервное копирование больших файлов с помощью rsync на внешние диски (NTFS) с учетом производительности и скорости

В настоящее время файлы копируются с одного внешнего жесткого диска на другой как средство обеспечения возможности восстановления с дополнительного устройства, если основной внешний жесткий диск станет недоступным, например. аппаратный сбой. Текущий метод основан на использовании Microsoft Windows.

Все резервные копии будут выполняться с устройств Linux, работающих под управлением Ubuntu 14.04.

Все внешние жесткие диски зашифрованы с использованием TrueCrypt и отформатированы с файловой системой NTFS, поскольку они также используются в других операционных системах, отличных от Linux, таких как Microsoft Windows.

Файлы также создаются в Microsoft Windows и хранятся на этих устройствах.

Размеры файлов варьируются от 100 КБ до 10 ГБ. Имеется около 1 миллиона файлов, и их число постоянно растет.

Требования

Теперь было упоминание об использовании переключателей или опций, таких как inplace однако имеется очень мало информации о дополнительных соображениях для зашифрованных дисков, которые используют файловые системы NTFS.

РЕДАКТИРОВАТЬ

Текущая попытка выполнения команды в качестве примера:

rsync -vrlptg /media/drive1 /media/drive2

Какие еще переключатели / опции должны быть включены для поддержки требований?

Большинство, если не все, ваши требования могут быть выполнены с помощью rsync:

Вот как можно использовать rsync с NTFS:

rsync -rvhc --size-only --progress /path/to/ntfs1/ /path/to/ntfs2/

rsync -rvhc --size-only --progress /path/to/ext4/ /path/to/ntfs/

Полезный совет: Если вы опустите -c (checksum); и использовать только rsync флаги -rvh; вы обнаружите заметное улучшение производительности и скорости.

флаги v (подробный) и h (читаемый человеком) необязательны. Больше информации Вот

Учитывая, что вы используете медленный протокол USB 2.0, очень важно передавать как можно меньше данных.

Rsync - ваш лучший друг здесь. Однако NTFS не делает вас в пользу. Использование чего-либо как EXT4 позволяет оставить жесткие ссылки для хранения только измененных файлов. Взгляни на rsnapshot для дополнительной информации

Если вы не можете изменить свою файловую систему, вы также можете взглянуть на чердак-подпорка, поэтому вы можете выполнять резервное копирование с дедупликацией, не прибегая к жестким ссылкам.