У меня есть несколько терабайт данных, которые мне нужно для резервного копирования в S3 / Glacier по медленному каналу. Я хочу загрузить, скажем, с 9 вечера до 9 утра и продолжить с того места, где оно было остановлено. Есть ли бесплатные программы, с которыми это легко можно сделать? Я мог бы использовать s3cmd / s3sync для загрузки, но есть ли простой способ управлять им с помощью cron? Я в порядке с задержкой в несколько дней, поскольку у меня есть статические данные, и я просто добавляю еще один уровень избыточности.
Было бы лучше просто запустить процесс и убить его, а затем перезапустить синхронизацию? В основном я ищу стандартную систему, но, вероятно, я мог бы просто написать несколько сценариев оболочки. Я использую Ubuntu и хочу использовать стандартные инструменты Linux.
Конечно, любая загрузка в диапазоне террабайт займет некоторое время, насколько медленным является ваш «медленный» канал связи?
Загрузка 1 террабайта по восходящей линии связи 10 Мбит займет 1024 * 1024 = 1048576 секунд = 290 часов = 12 полных дней.
Я бы посмотрел на массовую загрузку Amazon, отправив устройство NAS
Взгляни на http://aws.amazon.com/importexport/