AWS Snowball

Перемещение петабайтов данных с использованием встроенного хранилища и вычислительных ресурсов

AWS Snowball – это устройство для вычислений, а также переноса и хранения данных на периферии из семейства AWS Snow, которое доступно в двух комплектациях. Устройства Snowball Edge Storage Optimized обеспечивают блочное хранилище, объектное хранилище, совместимое с Amazon S3, а также предоставляют 40 виртуальных ЦП. Они идеально подходят для локального хранения и передачи большого объема данных. Устройства Snowball Edge Compute Optimized предоставляют 52 виртуальных ЦПУ, блочное и объектное хранилище, а также дополнительный графический процессор для таких сценариев использования, как продвинутое машинное обучение и анализ движущегося видеоизображения в отключенных средах. Эти устройства можно использовать для машинного обучения, сбора, обработки и хранения данных перед отправкой в AWS в средах с нестабильным сетевым подключением (например, на производстве, в промышленности или транспортной отрасли), а также на очень удаленных площадках (например, на военных базах или морских судах). Устройства можно устанавливать в стойку и объединять в кластеры для создания временных более крупных инсталляций.

Сервис AWS Snowball поддерживает определенные типы инстансов Amazon EC2 и функций AWS Lambda, что позволяет клиентам проводить разработку и тестирование в облаке AWS, а затем развертывать приложения на удаленных площадках на устройствах для сбора и предварительной обработки данных перед отправкой в AWS. В числе распространенных примеров использования AWS Snowball Edge – перенос и транспортировка данных, сопоставление изображений, захват потоковых данных с датчиков IoT и машинное обучение.

Introduction to Snowball (1:44)

Преимущества

Простое перемещение данных

С помощью AWS Snowball перемещение нескольких терабайтов данных можно выполнить примерно за неделю. Это сервис можно использовать для перемещения баз данных, резервных копий, архивов, медицинских записей, мультимедийного контента, наборов данных для аналитики и данных от датчиков IoT. Использование AWS Snowball Edge особенно актуально в условиях, когда качество сетевого подключения делает невозможным оперативное перемещение большого объема данных в облако AWS или из него.

Простота использования

Задание можно создать в Консоли управления AWS. После поступления задания AWS автоматически высылает по указанному адресу готовое к работе устройство Snowball Edge. Получив устройство, просто подключите его к локальной сети и к своим приложениям. Когда устройство готово к обратной отправке, метка пересылки E Ink автоматически обновляется, и транспортная компания доставляет устройство в соответствующий ЦОД AWS для перемещения данных. Состояние задания можно отслеживать с помощью сообщений Amazon SNS, по электронной почте или непосредственно в консоли управления AWS.

Локальная обработка и анализ данных

Запустите образы AMI EC2 и разверните код AWS Lambda на устройствах Snowball Edge, чтобы запустить локальную обработку, анализ с применением машинного обучения или другие приложения. Можно запускать приложения непосредственно на устройстве, настроенном в полном соответствии со средой AWS, без подключения к сети. Такая возможность позволяет разрабатывать и тестировать инструменты машинного обучения и анализа в облаке, а затем, перед отправкой данных обратно в AWS, развертывать приложения в средах, где сетевое подключение ограничено или отсутствует. 

Независимое хранилище

Устройства Snowball Edge могут служить в качестве локальных хранилищ данных для существующих локальных приложений. При этом используется протокол общего доступа к файлам (NFS) или интерфейс объектного хранилища (API S3). Доступны также встроенные тома блочного хранилища, где можно разместить приложения, запущенные на инстансах Amazon EC2 на базе Snowball. Кроме того, несколько устройств Snowball Edge можно объединить в более крупный уровень хранения с повышенной надежностью. Если устройство Snowball Edge требует замены, его можно удалить из кластера и установить взамен новое.

Безопасность

В устройствах Snowball Edge используется корпус с защитой от вскрытия, 256-битное шифрование и стандартный для отрасли модуль доверенной платформы (TPM), гарантирующий безопасность и обеспечивающий контроль процесса передачи и хранения данных. Управление ключами шифрования происходит с помощью сервиса AWS Key Management Service (KMS). Ключи шифрования ни при каких обстоятельствах не сохраняются на устройстве.

Масштабируемость

С помощью одного устройства Snowball можно переместить терабайты данных, а несколько устройств параллельно или в кластере обеспечивают передачу петабайтов данных в облако AWS или из него. Устройства Snowball доступны не во всех регионах. При создании запроса в Консоли управления AWS будет проверяться доступность данной услуги для выбранного региона.

Принцип работы

В консоли группы AWS Snow выберите предпочитаемое устройство: Snowball Edge Compute Optimized или Snowball Edge Storage Optimized. Создайте задание в корзине Amazon S3, выберите Amazon Simple Notification Service (Amazon SNS) для отслеживания и настройте такие параметры, как Amazon EC2 AMI и GPU. AWS подготавливает для вас устройство и отправляет его, а вы получаете его примерно через 4–6 дней. После прибытия устройства включите его и воспользуйтесь AWS OpsHub, чтобы его разблокировать. Подключитесь к локальной сети. Используйте AWS OpsHub, чтобы управлять устройством, предавать данные или запускать инстансы EC2. После завершения работы выключите устройство и верните его в AWS. На экране E Ink автоматически появится этикетка для пересылки. Когда устройство прибывает в регион AWS, все данные, которые хранятся в вашей встроенной корзине, перемещаются в корзину S3 и проверяются примерно столько же времени, сколько понадобилось для загрузки устройства. Потом все данные безопасно удаляются с устройства, и на нем очищается вся информация о клиенте.

Рабочие процессы

Snowball для периферийных вычислений

Novetta-Readying-multiple-Snowball-Edge-devices-for-coordinated-response-efforts-and-re-defining-working-from-home

Сценарии использования
Приложения для периферийных вычислений, сбора данных, обработки данных для мгновенного получения аналитической оценки и последующей передачи данных в AWS. Передача в AWS данных, непрерывно получаемых с датчиков или машин в больницах, заводских цехах и других периферийных местоположениях, с использованием сети.

Примеры пользователей
Клиенты в сфере здравоохранения применяют Snowball для переноса данных в облако AWS без использования сети. Благодаря Snowball клиенты получают безопасный способ миграции данных, соответствующих закону HIPAA, в облако с возможностью централизованного управления конфигурацией и работой устройств Snowball, развернутых для клиентов и организаций по всему миру.

Snowball для передачи данных

aws-snowball-edge-tactical-edge

Сценарий использования
Ускоренная пакетная передача данных в хранилище Amazon S3 и из него. С помощью Snowball можно удобно передавать данные при наличии ограничений или высокой стоимости подключения, ограничений пропускной способности, проблем устаревшей среды или удаленных местоположений для сбора данных. С помощью одного устройства Snowball можно переместить терабайты данных, а несколько устройств параллельно или в кластере обеспечивают передачу петабайтов данных в облако AWS или из него.

Примеры пользователей
Клиенты в государственном секторе и правоохранительных органах, а также в сфере обороны и разведки используют Snowball для миграции данных в AWS с целью получения тактического преимущества на земле, в небе и на море. 

Snowball для периферийного хранения данных

Help-NGO-at-work-with-the-AWS-Snowball-Edge

Сценарии использования
Агрегирование и обработка размещенных в периферийном местоположении данных с целью дальнейшей их передачи в AWS.

Примеры пользователей
Представители СМИ и индустрии развлечений, операторы дронов и другие создатели контента используют Snowball для агрегирования контента с камер на съемочных площадках и фотосессиях, шифрования контента и миграции данных в Amazon S3.

Примеры использования

Перенос данных в облако

Переносите приложение в облако? Отключаете массив хранения или закрываете центр обработки данных? Если вам нужно перенести в AWS большой объем данных, автономная передача данных с помощью AWS Snowball поможет преодолеть ограничение пропускной способности и избежать необходимости в приобретении более быстрого соединения. Кроме того, это решение упрощает задачи логистики благодаря автоматическим меткам пересылки E Ink.

Распространение контента

Во многих отраслях необходима возможность безопасного распространения контента. Авиакомпаниям, дизайнерам спецэффектов, студиям, банкам, больницам и даже спортивным командам необходимо переносить медиафайлы для просмотра, визуализации, обработки и анализа. Воспользуйтесь устройствами AWS Snowball, если вы регулярно получаете от своих клиентов, пользователей и партнеров большие объемы данных или передаете им такие объемы данных. Устройства Snowball можно отправлять из AWS непосредственно клиентам или потребителям.

Тактические периферийные вычисления

Общественным организациям, ответственным за оборону, государственную безопасность, реагирование на чрезвычайные ситуации и другие важные задачи, требуется собирать все больше данных с камер, датчиков или дронов. Сбор и даже некоторые операции обработки должны выполняться на месте работы этих критически важных работников – в полевых условиях, где ситуация постоянно меняется. Мощные вычислительные ресурсы, гибкое хранилище, средства защиты и укрепленные корпуса устройств, предоставляемых сервисом AWS Snowball, помогают тактическим командам сосредоточиться на своих прямых обязанностях, а не настройке и перемещении оборудования для хранения.

Машинное обучение

Сервис AWS Snowball дает возможность развертывать и запускать модели машинного обучения (например, для классификации документов и маркировки изображений) непосредственно на устройстве в целях оптимизации рабочих процессов, повышения эффективности и продуктивности, а также заблаговременного выявления неполадок. Кроме того, устройства Snowball можно применять для перемещения данных с удаленных или мобильных объектов в облако AWS для использования в машинном обучении.

Производство

На производственных площадках AWS Snowball используется для сбора и анализа производственных данных в целях оптимизации рабочих процессов, повышения безопасности, эффективности и продуктивности, а также заблаговременного выявления неполадок. Данные периодически передаются обратно в AWS для крупномасштабного анализа, позволяющего выявлять важные тенденции и закономерности.

Удаленные местоположения с простыми данными

AWS Snowball идеально подходит для удаленных приложений, требующих предварительной обработки данных, например маркировки, проверки, сжатия и систематизации изображений. Собирайте данные, быстро получайте результаты и/или выполняйте предварительную подготовку данных для облачных аналитических приложений. Затем отправляйте их обратно в AWS.

Примеры использования

NGA: новый способ перемещения разведывательных данных (59:18)
National Geospatial-Intelligence Agency

В этом видео специалист агентства NGA рассказывает, как сотрудники используют AWS Snowball для выполнения своих обязанностей.

Netflix: масштабная передача обработанных медиафайлов с помощью AWS (38:02)
Netflix

В этом видео специалист компании Netflix рассказывает, как создавать рабочие процессы доставки контента с помощью AWS Snowball.

Novetta: перенос данных и периферийные вычисления с использованием семейства продуктов AWS Snow (12:52)
Novetta

В этом видео специалист компании Novetta, партнера APN AWS, рассказывает, как сотрудники компании использовали AWS Snowball, Интернет вещей и машинное обучение в совместных учениях с аварийно-спасательным подразделением AWS.

INVISTA: инновации в сфере производства в облаке с использованием AWS Snowball (1:45)
Invista

В этом видео представитель компании INVISTA обсуждает использование устройств AWS Snowball для миграции десятков терабайтов разрозненных данных предприятия в озеро данных.

LotteON

Компания Lotte консолидировала 140 миллионов файлов за 2 недели с помощью AWS Snowball, чтобы запустить онлайн-платформу по продаже LotteON. С помощью AWS Snowball компания обеспечила экономичную, безопасную и быструю передачу данных в автономном режиме. Благодаря AWS Snowball компания Lotte смогла передать данные без дополнительных сетевых ресурсов.

Подробнее »

200x100_Photobox_Logo_no-padding(1)

Компании Photobox нужно было избавиться от необходимости в приобретении и обслуживании собственной ИТ-инфраструктуры, чтобы перераспределить ресурсы в пользу инноваций в сфере искусственного интеллекта и других областях для более качественного обслуживания клиентов. Благодаря переходу с локальных массивов хранения данных Dell EMC Isilon и IBM Cleversafe в Amazon S3 с помощью AWS Snowball Edge компания Photobox значительно сократила расходы на хранение своих 10 ПБ фотографий.

Подробнее »

Блоги о Snowball

Публикации по данной теме не найдены. Прочие ресурсы см. в блоге AWS

Другие блоги по AWS Snowball можно найти на канале блога AWS Storage.

Новые возможности Snowball

Дата
  • Дата
1
Ознакомиться с документацией
Ознакомиться с возможностями Snowball

AWS Snowball – устройство для перемещения данных объемом несколько петабайтов, оснащенное встроенным хранилищем и вычислительными возможностями. Эти возможности позволяют добиться поставленной цели.

Подробнее 
Зарегистрировать аккаунт AWS
Зарегистрировать бесплатный аккаунт

Получите мгновенный доступ к уровню бесплатного пользования AWS. 

 

Регистрация 
Начать разработку с SFTP
Начать разработку в консоли

Начните разработку с использованием AWS Snowball в Консоли управления AWS.

Вход 
Готовы приступить к разработке?
Начать работу с AWS Snowball
Есть вопросы?
Свяжитесь с нами