Сервисы AWS Snow
Физические устройства для миграции данных в облако AWS и из него
Обзор CNBC. Как клиенты используют семейство сервисов AWS Snow для переноса больших объемов данных в облако
Представляем сервисы AWS Snow
Сервисы Snow предлагают несколько типов физических устройств и ресурсных точек, в том числе устройства со встроенными вычислительными возможностями. Эти сервисы помогают физически переносить данные объемом до нескольких эксабайтов в облако AWS и из него. Сервисы Snow принадлежат AWS и управляются ею, они интегрированы с системами безопасности, мониторинга, управления хранилищем и вычислительными возможностями AWS.
Проблема: данные являются основой цифровых проектов в облаке. Однако, по словам клиентов, перемещение в облако больших объемов данных представляет для них непростую задачу. Выделенное сетевое подключение 1 Гбит/с теоретически позволяет передать 1 ПБ данных за 100 дней, но на практике, скорее всего, выполняется еще дольше и стоит дороже. Миграция аналитических сред с интенсивным использованием данных, перемещение корпоративных ЦОД в облако, возвращение к работе заархивированных данных требуют использования таких способов передачи массива данных, которые были бы простыми, доступными, безопасными и защищенными от несанкционированного доступа. Для рабочих нагрузок в удаленных периферийных местоположениях также может потребоваться предварительная обработка данных с помощью вычислительной мощности встроенных устройств.
Чтобы начать работу, просто отправьте запрос на устройство через консоль AWS. Мы отправим его вам, вы запишете на устройство данные и вернете в регион AWS, из которого он прибыл. Устройства просто распределяются, являются чрезвычайно экономичными и предназначены для безопасного временного хранения данных в процессе перемещения между местоположением клиента и регионом AWS выбранной транспортной компанией.
Все устройства Snow разработаны для обеспечения безопасности и защиты от несанкционированного доступа на месте или при передаче в AWS: аппаратное и программное обеспечение имеет криптографическую подпись, а все сохраненные данные автоматически шифруются с помощью 256‑битных ключей, которые принадлежат клиенту и находятся под его управлением. Для создания ключей и управления ими можно использовать AWS Key Management Service (KMS). После завершения задания содержимое устройств стирается в соответствии с инструкциями NIST по очистке носителей информации.
Устройства AWS Snow
AWS Snowball
AWS Snowball – это сервис передачи петабайтов данных, созданный на базе защищенного устройства размером с небольшой чемодан, которое позволяет быстро и эффективно перемещать данные в облако AWS и из него. Задания создаются в Консоли управления AWS, после чего устройства (одно или несколько) отправляются на указанный адрес для заполнения данными. После завершения задания устройства отправляются обратно в AWS, а данные помещаются в указанную клиентом корзину S3. Как правило, время от начала до завершения перемещения составляет около недели. Устройства Snowball обычно используются для перемещения терабайтов или петабайтов аналитических данных, данных здравоохранения и медико‑биологических данных, видеобиблиотек, репозиториев изображений, резервных копий, для архивирования информации при остановке ЦОД, для замены магнитных лент или в проектах миграции приложений.
AWS Snowball Edge
Устройства AWS Snowball Edge имеют немного большую емкость и встроенную вычислительную платформу, которая позволяет выполнять простые задачи, связанные с обработкой данных. Их можно размещать в стойке, а также группировать, что упрощает сбор и хранение данных в очень удаленных местоположениях. Клиенты используют эти устройства в средах с нестабильным сетевым подключением (например, на производстве, в промышленности или транспортной отрасли) или на сильно удаленных площадках (например, на военных базах или морских судах) перед отправкой обратно в ЦОД AWS. Snowball Edge предоставляет бессерверные приложения для вычислений в периферийных местоположениях с помощью AWS Greengrass и функций Lambda. Распространенные примеры использования включают захват потоков данных с датчиков IoT, динамическое перекодирование мультимедийных материалов, сжатие изображений, сбор метрик, а также сигнализация и предупреждение при управлении производственными процессами.
AWS Snowmobile
AWS Snowmobile позволяет переместить до 100 ПБ данных (объем 1250 устройств AWS Snowball) в укрепленном транспортном контейнере Snowmobile длиной 13,7 м. Решение идеально подходит для переноса мультимедийных данных объемом несколько петабайтов и эксабайтов, а также для использования при остановке центров обработки данных. Snowmobile прибывает в местоположение клиента и становится доступным в виде подключенного к сети хранилища для максимально безопасной и высокоскоростной передачи данных. После передачи данных на Snowmobile контейнер возвращается в соответствующий регион AWS, откуда данные загружаются в Amazon S3. Snowmobile защищен от несанкционированного доступа, водонепроницаем, имеет контроль температуры, а также множество уровней логической и физической безопасности, включая шифрование, пожаротушение, специально выделенных сотрудников службы безопасности, отслеживание по GPS, сигнализацию, круглосуточное видеонаблюдение, а также дополнительные автомобили службы безопасности для сопровождения контейнера во время перевозки.
Сравнение возможностей
| AWS Snowball | AWS Snowball Edge |
AWS Snowmobile |
|
|---|---|---|---|
| Сценарий использования |
Миграция данных |
Миграция данных с возможностью встроенной предварительной обработки |
Миграция данных |
| Емкость хранилища |
50 ТБ или 80 ТБ |
100 ТБ |
100 ПБ |
| Возможность встроенных вычислений | – | AWS Lambda Образы AMI Amazon EC2 |
– |
| Шифрование |
256‑битное |
256‑битное |
256‑битное |
| Передача с помощью NFS |
– | Да | Да |
| Передача с помощью HDFS |
Да |
– | – |
| Передача с использованием API S3 | Да | Да | Нет |
| Кластеризация |
– |
Да, до 20 узлов |
– |
| Монтаж в стойку | Полка | Да | – |
| Соответствие требованиям HIPAA | Соответствует | Соответствует | Нет |
| Стандартное время выполнения задания |
Дни или недели | Миграция данных: дни или недели Локальные вычисления: недели или месяцы |
Недели или месяцы |
| Максимальная продолжительность выполнения задания |
90 дней | Миграция данных: 90 дней Локальные вычисления: 120 дней |
120–360 дней |
Цены и доступность
Устройства Snow и транспортные средства принадлежат Amazon и управляются ею, поэтому клиентам не нужно инвестировать средства в новое оборудование. Клиенты оплачивают различные стартовые сборы и доставку каждого устройства. Если требуется большая емкость, можно запросить несколько устройств одновременно. Amazon следит за состоянием работоспособности и использованием устройств Snowball, заменяя их по мере необходимости. Доступность сервисов в разных регионах может отличаться, поэтому для получения дополнительных сведений ознакомьтесь со страницей продуктов Snow или страницей доступности сервисов по регионам.
Начало работы с AWS
Обучение с помощью 10-минутных учебных пособий
Подробнее о каждом сервисе AWS Snow