У меня есть клиент, загружающий в Glacier несколько ТБ данных. Они сделали снежный ком, получив 65 ТБ данных, а оставшиеся ~ 25 они собираются сделать путем загрузки. В настоящее время они загружают файлы непосредственно в Glacier с помощью FastGlacier, но этот инструмент работает на их единственном компьютере с Windows (полноценный магазин Mac) и постоянно дает сбой из-за того, что помещается в очередь столько данных. Кроме того, эта программа оставляет желать лучшего в отношении поиска / просмотра магазина, так как для просмотра файлов в Glacier вам необходимо загрузить инвентарь (с временем выполнения 4-6 часов).
Для единообразия мы хотели бы загрузить в общий ресурс S3, который мы использовали для Snowball, с тем же нулевым переходом на Glacier с использованием правила управления жизненным циклом, но не хотим нести огромные затраты на S3 для этого. Я знаю, что стоимость S3 основана на среднем использовании за месяц, но не знаю, как это оценить.
AWS Обзор складских услуг белая бумага (две ссылки): «Вы можете указать абсолютный или относительный период времени (включая 0 дней), по истечении которого указанные объекты Amazon S3 должны быть переведены в Amazon Glacier».
Правила жизненного цикла S3 Скажем, вы не можете перевести данные S3 в класс хранилища с нечастым доступом в течение 30 дней после загрузки. Однако вы можете сразу перейти к леднику - "0 дней" кажется допустимой настройкой.
Я сам пробовал. Я создал новое ведро с правилом жизненного цикла для перехода к леднику через 0 дней. Я загрузил небольшой файл, используя стандартный класс S3. Файл изменился на класс хранения ледника через 5-8 часов после загрузки. Точнее сказать не могу, потому что логов об этом не вижу и проверял лишь изредка.
Вы можете подумать об использовании шлюз хранения, но это зависит от запуска виртуальной машины в локальной среде. Он хранит данные в S3, поэтому вам придется переносить их с помощью правил жизненного цикла. Клиент загрузки может быть проще, учитывая время, которое на это потребуется.
На Mac работают клиенты Glacier, например Заморозить, Загрузчик ледника, и другие.