Назад | Перейти на главную страницу

перемещение файлов размером 2 ТБ из локальной среды в Google Cloud Storage

Наша старая инфраструктура размещалась на локальном сервере, и теперь мы переходим к облачному хранилищу Google. Проблема в том, что мое исходящее соединение с сервером довольно медленное, есть ли идеи по синхронизации моих файлов из локальной среды с облачным хранилищем?

Проверить, если передаточное устройство это вариант:

Transfer Appliance - это стоечный сервер хранения большой емкости, который вы устанавливаете в своем центре обработки данных. Заполните его данными, а затем отправьте нам, и мы загрузим ваши данные в Google Cloud Storage. Обладая емкостью до одного петабайта со сжатием, Transfer Appliance помогает переносить данные на порядки быстрее, чем по обычной сети.

Если у вас ограниченная пропускная способность, вы можете следовать инструкциям в документ. Документ дает вам ответы на такие вопросы, как:

Почему мне следует использовать службу передачи для локальных данных? У меня ограниченная пропускная способность. Могу ли я использовать службу передачи для локальных данных?

В соответствии с документом это работает следующим образом:

Ниже приводится общий обзор того, как работает служба передачи локальных данных:

  1. Установите Docker и запустите небольшой программный продукт, называемый агентом, в вашем частном центре обработки данных. Агент работает в контейнере Docker и имеет доступ к вашим локально смонтированным данным NFS.

Дополнительные сведения см. В разделе Установка и запуск локального агента.

  1. Полный перенос для локальной настройки в первый раз.

  2. Запустите службу передачи для локальной передачи данных из Google Cloud Console. Вы предоставите каталог NFS и целевую корзину облачного хранилища для передачи данных.

Дополнительные сведения см. В разделе «Создание задания передачи».

  1. Когда начинается передача, она рекурсивно проходит через указанный каталог NFS и перемещает найденные данные в вашу корзину облачного хранилища.

Переданные данные проверяются контрольной суммой, файлы с ошибками проверяются повторно, а данные отправляются через безопасное соединение. Запись о ходе передачи записывается в объекты журнала в целевом сегменте облачного хранилища. Вы можете отслеживать ход передачи в Google Cloud Console.

  1. Когда передача завершится, вы можете просмотреть образцы ошибок в Google Cloud Console. Вы также можете просмотреть журнал передачи на предмет наличия каталога переданных файлов и любых ошибок.

В этом документе вы можете найти более подробную информацию и необходимые дополнительные шаги.