Назад | Перейти на главную страницу

Метод создания доступных, сжатых и дедуплицированных долгосрочных архивов

Я ищу хороший метод архивирования больших объемов данных (несколько 10 ГБ смешанных данных, частично содержащих дубликаты) в течение более длительного периода времени. Данные должны храниться как можно эффективнее с точки зрения использования дискового пространства, и желательно шифрование (достаточно симметричного). Однако он должен быть легко доступен, например через крепления (достаточно только чтения). Данные не будут изменены. Обратите внимание, что этот вопрос не касается резервных копий, поскольку данные должны быть перемещены в архив и сохранены на машине, для которой регулярно создается резервная копия.

Один из вариантов - tar / bzip2 как «старый школьный способ» для создания архивов и их шифрования с помощью gpg. Однако дедупликация невозможна, и, как ни странно, нет возможности монтировать такие зашифрованные архивы без расшифровки всего объема данных и последующего использования archivemount. Этого я бы хотел избежать.

Файлы-контейнеры, зашифрованные LUKS, более гибкие, но я не уверен, как легко реализовать здесь дедупликацию (возможно, используя подходящие FS / жесткие ссылки?). Также для монтирования необходимы права root, чего я бы тоже хотел избежать.

В последнее время я начал использовать borg backup для резервного копирования данных с разных серверов и был поражен его возможностями (дедупликация, шифрование и т. Д.). Я подумал о том, что borg будет полезен для этой цели, поскольку он позволяет создавать репозитории / архивы, которые

Тем не менее, сейчас я немного сомневаюсь:

Q1: Подходит ли для этой цели борг?

2 квартал: Есть ли альтернативы для этого варианта использования?

Изменить: более точные вопросы.