Вопрос: Что такое Snowball Edge?

Snowball Edge – это устройство для передачи 100 ТБ данных со встроенным хранилищем и вычислительными ресурсами, позволяющими использовать некоторые функциональные возможности AWS. Snowball Edge не только помогает передавать данные на AWS, но и может взять на себя локальные рабочие нагрузки по обработке данных и вычислениям. Возможности решения включают в себя совместимую с S3 конечную точку на устройстве, файловый интерфейс с поддержкой NFS, режим кластеризации, в котором несколько устройств Snowball Edge могут объединяться в единый масштабируемый пул хранения данных с повышенной надежностью, а также поддержку выполнения функций Lambda при копировании данных на устройство.

Вопрос: Как использовать устройство Snowball Edge?

Для начала необходимо заказать через Консоль управления AWS определенное число устройств Snowball Edge, соответствующее объему передаваемых или обрабатываемых данных. Выбранные корзины и функции Lambda будут автоматически настроены, зашифрованы и установлены на устройства перед отправкой. Когда устройство будет доставлено, подключите его к локальной сети и назначьте IP-адрес (вручную или с помощью DHCP). Затем с помощью клиента Snowball Edge, манифеста задания и кода разблокирования проверьте целостность устройства Snowball Edge и разблокируйте его для дальнейшего использования. Манифест и код разблокирования уникальны и криптологически привязаны к конкретному устройству Snowball Edge, что предотвращает их использование с другими устройствами. Данные, копируемые в Snowball Edge, автоматически зашифровываются и записываются в соответствующие корзины.

Вопросы доставки и логистики берет на себя Amazon, поэтому как только вы завершите копирование и устройство будет готово к возврату, на ярлыке отправления E Ink автоматически появится обратный адрес, который поможет вернуть устройство Snowball Edge в соответствующий ЦОД AWS. Вы сможете отслеживать состояние посылки с помощью сервиса Amazon Simple Notification Service (Amazon SNS), текстовых сообщений или непосредственно в Консоли управления.

Управление ресурсами Snowball Edge осуществляется через Консоль управления AWS без необходимости привлекать к работе системных инженеров на местах.

Вопрос: В каких случаях стоит использовать Snowball Edge?

Вам оптимально подойдет решение Snowball Edge, если нужно быстро и безопасно переместить в облако AWS терабайты или петабайты данных. Snowball Edge можно использовать для передачи накопленных за долгое время данных или для регулярной передачи собираемых данных AWS из хранилищ с ограниченным или слишком дорогостоящим доступом в Интернет. Устройства Snowball Edge также помогают выполнять периферийные вычислительные рабочие нагрузки, такие как аналитика локальных данных с помощью функций Lambda на базе кластера Snowball Edge с повышенной надежностью и конечными точками, совместимыми с S3. Решение эффективно встраивается в действующие рабочие процессы за счет использования встроенных возможностей, таких как файловый интерфейс NFS, а также позволяет переносить файлы на устройство с сохранением метаданных. Snowball Edge подходит для работы в удаленных регионах и сложных операционных условиях, например в заводских цехах и больницах, на ветрогенераторах и кораблях. Устройства Snowball Edge поставляются полностью настроенными и не требуют подключения к Интернету, так что обработку и сбор данных можно проводить в изолированной операционной среде. Snowball Edge поддерживает работу с традиционным ПО на периферийных местоположениях и обеспечивает доступ к тем же возможностям AWS, что и при подключении к AWS напрямую.

Вопрос: Можно ли использовать Snowball Edge для переноса данных из одного региона AWS в другой регион AWS?

Нет. Решение Snowball Edge предназначено для перемещения больших объемов данных в определенный регион AWS или из него. Для перемещения данных между регионами AWS рекомендуется использовать межрегиональную репликацию S3

Вопрос: Какие объемы данных можно перемещать с помощью Snowball Edge?

С помощью Snowball Edge можно перемещать любые объемы данных, от нескольких терабайтов до десятков петабайтов. С помощью одного устройства Snowball Edge можно перенести до 100 ТБ данных, с помощью нескольких устройств, используемых последовательно или параллельно, – еще больше. Например, с помощью десяти устройств Snowball Edge можно перенести 1 петабайт данных.

Вопрос: Сколько времени занимает передача данных?

Скорость передачи данных зависит от множества факторов: скорости локальной сети, размера файлов и скорости считывания данных с локальных серверов. Общее время перемещения 100 ТБ данных в AWS с помощью Snowball Edge составит около недели, включая стандартное время на пересылку и обработку данных в ЦОД AWS.

Вопрос: В течение какого времени можно использовать Snowball Edge для выполнения конкретного задания?

Устройства Snowball Edge должны быть возвращены в течение 360 дней с момента подготовки устройств Snowball Edge.

Вопрос: Каковы технические характеристики устройства Snowball Edge?

Snowball Edge представляет собой контейнер хранилища объемом 100 ТБ в укрепленном, готовом к пересылке корпусе, рассчитанном на монтаж в серверную стойку. Устройство также обладает локальной вычислительной мощностью на уровне инстанса EC2 m4.4xlarge с поддержкой ряда дополнительных возможностей. Полный перечень технических характеристик оборудования, включая сетевые интерфейсы, температурные требования, требования по электропитанию, уровень шума в децибелах и габариты, см. в документации Snowball Edge.

Вопрос: Какие сетевые интерфейсы поддерживает Snowball Edge?

Snowball Edge поддерживает сетевое подключение 10GBase-T с интерфейсами 10/25 Гбит SFP28 и 40 Гбит QSFP+ для медного кабеля или оптоволокна, что позволяет передавать данные на высокой скорости.  

Вопрос: Каковы условия доставки устройств Snowball Edge? Возможна ли срочная доставка?

По умолчанию сервис Snowball Edge использует услугу двухдневной доставки от компании UPS. Если у вас есть срочные задания, можно воспользоваться ускоренной доставкой.


Вопрос: В каких регионах доступен Snowball Edge?

Актуальную информацию можно найти на страницах доступности сервисов по регионам.

К сожалению, в настоящее время мы не можем обеспечить работу сервиса во всех штатах США.

Вопрос: Можно ли отправить Snowball Edge в другой регион AWS?

Нет. Устройства Snowball Edge можно запрашивать и использовать в пределах одного региона AWS. Устройство можно вернуть только в тот регион, откуда был направлен запрос на его получение. Устройства Snowball Edge, используемые для импорта и экспорта в регионе AWS ЕС, могут использоваться в любой из 28 стран ЕС.


Вопрос: Выполняет ли Snowball Edge шифрование данных?

Snowball Edge шифрует все данные с помощью 256-битного шифрования. Пользователь самостоятельно управляет ключами шифрования с помощью AWS Key Management Service (AWS KMS). Ключи не хранятся на устройстве. После отключения и возврата в AWS вся память Snowball Edge стирается.

Вопрос: Какие физические средства защиты данных используются в Snowball Edge?

Кроме корпуса с защитой от взлома, в устройствах Snowball Edge используется стандартный модуль доверенной платформы (TPM), особый процессор которого предназначен для обнаружения любых несанкционированных изменений аппаратного или программного обеспечения, а также прошивки. Каждое устройство визуально и криптографически проверяется платформой AWS на наличие каких-либо признаков взлома, а также изменений, зарегистрированных модулем TPM.

Вопрос: Какие цифровые средства защиты данных используются в Snowball Edge?

Устройство Snowball Edge разработано для защиты самых конфиденциальных данных клиентов. Все данные шифруются с использованием ключей, предоставленных пользователем через AWS Key Management Service (KMS). Ключи не хранятся на устройстве и удаляются при отключении питания. Приложения и функции Lambda запускаются в физически изолированной среде и не имеют доступа к хранилищу. Наконец, когда данные будут переданы в AWS, информация с устройства будет удалена в соответствии со стандартами National Institute of Standards and Technology. Устройства Snowball Edge защищены от атак, а все файлы конфигурации зашифрованы и подписаны ключами, которые никогда не хранятся на самих устройствах.

Вопрос: Существует ли простой способ отслеживания состояния заданий на передачу данных?

В устройствах Snowball Edge используются инновационные ярлыки отправлений E Ink, благодаря которым устройство всегда доставляется в нужный ЦОД AWS. После передачи данных на устройство состояние задания на передачу данных можно отслеживать с помощью текстовых сообщений и электронных писем сервиса Amazon SNS или Консоли управления.


Вопрос: Как скопировать данные на устройство Snowball Edge?

После того как устройство Snowball Edge подключено и активировано, можно начать перенос данных из локальных источников на него через совместимую с S3 конечную точку или файловый интерфейс NFS (оба варианта доступны на устройстве). Копирование данных можно также запустить через клиент Snowball. Подробнее см. в документации Snowball Edge.

Вопрос: Что необходимо сделать по завершению передачи данных на устройство Snowball Edge?

По завершении задания на передачу на ярлыке возврата отправления E Ink устройства Snowball Edge будет автоматически указан адрес соответствующего ЦОД AWS. Вам останется только передать устройство Snowball Edge в ближайший пункт службы доставки UPS. Состояние задания на передачу данных можно отслеживать с помощью текстовых сообщений и электронных писем сервиса Amazon SNS или Консоли управления.


Вопрос: Сколько стоит экспорт данных?

Кроме оплаты задания Snowball Export по тарифам, описанным на странице цен, взимается плата за извлечение данных из хранилищ Amazon S3.


Вопрос: Что такое конечная точка Snowball Edge, совместимая с S3?

Конечная точка Snowball Edge, совместимая с S3, позволяет выполнять чтение данных и их запись на устройство с помощью отдельных операций S3 и клиентских инструментов с поддержкой S3.

Вопрос: Какие операции S3 поддерживаются конечными точками Snowball Edge, совместимыми с S3?

Конечные точки Snowball Edge, совместимые с S3, поддерживают следующие операции Amazon S3: Get, Head, Put, Delete, List и MultipartUpload. Данные операции выполняются на Snowball Edge так же, как на конечной точке веб-сервиса S3. Для чтения данных и их записи на Snowball Edge можно также использовать клиентские инструменты с поддержкой S3.

Вопрос: Зачем использовать конечные точки, совместимые с S3?

Конечные точки, совместимые с S3, позволяют программно передавать данные с помощью операций S3, которые изначально поддерживаются устройством Snowball Edge. Snowball Edge можно эффективно интегрировать в существующие приложения и рабочие процессы, разработанные для Amazon S3.

Вопрос: Каким образом защищаются данные при использовании конечных точек, совместимых с S3?

Данные, которые передаются через конечные точки, совместимые с S3, защищаются расширенными механизмами защиты Snowball Edge, шифрующими все данные с помощью 256-битного шифрования. Пользователь самостоятельно управляет ключами шифрования с помощью AWS Key Management Service (AWS KMS). Ключи никогда не хранятся на устройстве, а при отключении питания вся память Snowball Edge стирается.

Вопрос: Какие языки программирования поддерживают конечные точки, совместимые с S3?

Конечные точки, совместимые с S3, поддерживают интерфейс REST, не зависящий от конкретного языка программирования.


Вопрос: Что представляет собой файловый интерфейс Snowball Edge?

Файловый интерфейс позволяет хранить объекты на Snowball Edge и извлекать их с использованием стандартных протоколов доступа к файловым хранилищам. Когда Snowball Edge будет доставлен обратно в AWS для импорта данных, эти объекты будут загружены в Amazon S3 и доступны непосредственно через S3 в обычном порядке. Кроме того, доступ к объектам как к файлам, включая исходные метаданные файловой системы, можно получить через AWS Storage Gateway.

Вопрос: Как использовать файловый интерфейс Snowball Edge?

После прибытия Snowball Edge к клиенту и разблокирования любая из корзин S3 становится доступной приложениям, так как экспортированная NFS становится видна в сети, к которой подключено устройство Snowball Edge. Для отключения/включения файлового интерфейса можно использовать ЖК-дисплей устройства Snowball Edge. Можно подключить экспортированную NFS к своему серверу, чтобы приложения могли читать и записывать файлы, как в любой другой сетевой файловой системе с общим доступом. Мониторинг состояния файлового интерфейса и подключение к каналу поддержки можно выполнять через ЖК-дисплей.

Вопрос: Какие существуют примеры использования файлового интерфейса Snowball Edge?

Существует множество примеров использования файлового интерфейса. Он позволяет загружать существующие файлы в Amazon S3 в виде объектов с использованием общего файлового протокола (NFS) и сохраняет связанные метаданные файлов как метаданные объектов. Такая автономная массовая передача данных позволяет загружать файловые данные в S3 и использовать их для облачных рабочих нагрузок, например обработки больших данных. Как вариант, с помощью AWS Storage Gateway переданные файловые данные можно сделать доступными для ваших сайтов с гибридными приложениями или рабочих процессов.

Вопрос: Каковы преимущества использования файлового интерфейса Snowball Edge?

Файловый интерфейс Snowball Edge позволяет существующим приложениям, устройствам и процессам, работающим с файлами, записывать данные с использованием стандартных файловых протоколов, сохраняя при этом метаданные.

Вопрос: Какие файловые протоколы поддерживает устройство?

Snowball Edge поддерживает клиенты, подключающиеся по протоколам NFS v3 и v 4.1. Клиенты Microsoft Windows, поддерживающие NFS v3, также могут подключаться к Snowball Edge.

Вопрос: Каким образом файлы хранятся на Snowball Edge?

Файлы хранятся на устройстве AWS Snowball Edge как объекты в корзинах. Метаданные файловой системы, такие как разрешения, принадлежность и отметки времени, хранятся в виде пользовательских метаданных объектов. На Snowball Edge все данные и метаданные хранятся в зашифрованном виде.

Вопрос: Как изменить настройки файлового интерфейса Snowball Edge?

Включение и отключение файлового интерфейса, мониторинг его состояния и доступ к каналу поддержки осуществляется с помощью ЖК-дисплея на устройстве Snowball Edge.

Вопрос: Можно ли использовать для записи в корзину на устройстве AWS Snowball Edge и файловый интерфейс, и Amazon S3 Adapter для Snowball?

Мы не рекомендуем при записи в корзины на устройстве AWS Snowball Edge совмещать запись напрямую и через файловый интерфейс. Если напрямую перезаписать или обновить объект, который был ранее записан через файловый интерфейс, при обращении к этому объекту через файловый интерфейс может возникнуть ошибка. Одновременная модификация одного и того же объекта через файловый интерфейс и Amazon S3 Adapter для Snowball приведет к непредсказуемым результатам.

Вопрос: Можно ли использовать для чтения из одной и той же корзины на устройстве AWS Snowball Edge и файловый интерфейс, и Amazon S3 Adapter для Snowball?

Мы не рекомендуем совмещать использование файлового интерфейса и Amazon S3 Adapter для Snowball для чтения из одной и той же корзины на устройстве AWS Snowball Edge. Это может привести к непредсказуемым результатам.

Вопрос: Что лучше использовать для загрузки данных в Snowball Edge, файловый интерфейс или Amazon S3 Adapter для Snowball?

Вы можете использовать файловый интерфейс, если существующий рабочий процесс работает с файлами или требуется получить доступ к объектам в S3 в виде файлов, используя стандартные операции файловой системы. Если приложению не требуется выполнять операции файловой системы и оно может загружать файлы напрямую, можно использовать Amazon S3 Adapter для Snowball.

Вопрос: Какова разница между файловым интерфейсом Snowball Edge и AWS Storage Gateway?

Файловый интерфейс Snowball Edge позволяет легко выполнять миграцию файлов в S3 без подключения к Интернету. Это полезно, когда нужно импортировать наборы файлов, которые не должны быть немедленно доступны в S3, или расположены в местах с пропускной способностью, недостаточной для передачи данных по сети.

AWS Storage Gateway позволяет помещать файловые данные в S3 через Интернет или через AWS Direct Connect, при этом загружаемые файлы становятся доступны мгновенно.

Вопрос: Можно ли с помощью Amazon EFS получить доступ к файлам, переданным через файловый интерфейс Snowball Edge?

Нет. К файлам, переданным через файловый интерфейс Snowball Edge, можно получить доступ как к объектам в S3 или как к файлам с помощью AWS Storage Gateway.


Вопрос: Что представляет собой возможность кластеризации в Snowball Edge?

Возможность кластеризации в Snowball Edge позволяет объединить множество устройств Snowball Edge, чтобы создать один логический пул хранения данных с повышенной емкостью и надежностью.

Вопрос: Для чего можно использовать возможность кластеризации в Snowball Edge?

Кластеризация устройств Snowball Edge повышает надежность и масштабируемость локального пула хранения данных. За счет использования множества устройств Snowball Edge кластеры Snowball Edge позволяют получить доступ к большому объему локального хранилища.

Вопрос: Можно ли использовать Snowball Edge в кластерной конфигурации для расширения или замены локального решения по хранению данных?

Да. Масштабируемое хранилище, которое поставляется с устройством Snowball Edge, предназначено для безопасного и надежного хранения данных.

Вопрос: В каких сценариях можно использовать возможность кластеризации Snowball Edge?

Возможность кластеризации в Snowball Edge можно использовать, когда требуется надежное локальное хранилище. Некоторые клиенты сталкиваются с ситуациями, когда требуется надежное хранилище на удаленных площадках, где трудно организовать хранение больших объемов данных. Например, есть производственные компании, которые хотят иметь пул хранения данных на каждом заводе. В армии есть подразделения, которые меняют требования к хранению данных и нуждаются в гибкости в вопросе увеличения и уменьшения емкости хранилища данных, например, для кораблей.

Вопрос: Как начать использовать кластер Snowball Edge?

Кластер Snowball Edge можно заказать с помощью API AWS Snowball, Консоли управления AWS, SDK или интерфейса командной строки AWS. После создания кластера клиент получает идентификатор кластера (начинающийся с CID), который он будет использовать в качестве ссылки при любых операциях с этим конкретным кластером.

Вопрос: Ограничен ли минимальный размер кластера Snowball Edge?

Да, минимальный размер кластера Snowball Edge – 5 узлов.

Вопрос: Ограничен ли максимальный размер кластера Snowball Edge?

Да, максимальный размер кластера Snowball Edge – 10 узлов.

Вопрос: Каково эффективное пространство хранилища на кластере Snowball Edge?

Общий размер кластера Snowball Edge зависит от количества узлов и полезной емкости каждого узла, составляющей 45 ТБ.Например, в кластере из 5 устройств с общей физической памятью 500 ТБ эффективное пространство хранилища составит 225 ТБ. Величину общего полезного пространства и общего доступного пространства в кластере можно узнать с помощью следующей команды:

snowballEdge status -i IP_адрес_основного_узла -m путь/к/файлу/манифеста -u код_разблокировки

Вопрос: Можно ли создать кластер из отдельно выделенных устройств Snowball Edge?

Нет. Единственный способ начать использование кластера – создать задание типа «AWS Snowball Edge cluster».

Вопрос: Как настроить кластер после того, как устройства Snowball Edge будут доставлены в мое местоположение?

Когда устройства Snowball Edge доставлены к месту работы, требуется включить их, подключить к одной сети, загрузить файл манифеста и код разблокирования, загрузить клиент Snowball и разблокировать кластер.

Вопрос: Можно ли сказать, что клиент взаимодействует с конкретным узлом, который играет роль точки входа в кластер Snowball Edge?

Да. Каждый кластер Snowball Edge имеет один основной узел и несколько вторичных узлов. Можно выбрать, какое устройство будет основным узлом. Все операции записи выполняются через основной узел, а операции чтения могут выполняться с любого узла.

Вопрос: Как разблокировать кластер Snowball Edge?

Запишите IP-адрес любого из устройств Snowball Edge, отображаемый на экране ЖК-дисплея. Это устройство будет использоваться как основной узел. Чтобы разблокировать кластер Snowball Edge, подключитесь к основному узлу с помощью клиентского программного обеспечения и введите команду разблокировки, как показано ниже. Разблокирование основного узла приведет к разблокированию кластера.

snowballEdge unlock -i IP_адрес_основного_узла -s IP_адрес_второстепенного_узла_1 IP_адрес_второстепенного_узла_2 IP_адрес_второстепенного_узла_3 IP_адрес_второстепенного_узла_4 -m путь/к/файлу/манифеста -u код_разблокировки

Вопрос: Нужно ли разблокировать каждый узел кластера Snowball Edge?

Нет. Каждый кластер Snowball Edge имеет один файл манифеста кластера и код разблокировки. С помощью файла манифеста и кода разблокировки можно разблокировать основной узел, который затем автоматически разблокирует вторичные узлы.

Вопрос: Можно ли разблокировать некоторые узлы кластера Snowball Edge до того, как будут получены все устройства, или нужно подождать, пока будут получены все устройства?

Запускать кластер Snowball Edge с меньшим количеством узлов, чем выделено при задании кластера, не рекомендуется, поскольку возможность надежной записи или чтения будет зависеть от количества узлов.

Вопрос: Как узнать общее количество узлов в кластере Snowball Edge?

Узнать количество узлов, доступных в кластере Snowball Edge, можно в любой момент, введя следующую команду:

snowballEdge status -i IP_адрес_основного_узла -m путь/к/файлу/манифеста -u код_разблокировки

Вопрос: Как узнать, какой уровень сохранности данных обеспечивает кластер Snowball Edge?

Кластер Snowball Edge отображает уровень сохранности данных при вводе команды «snowballEdge status». Статус кластера можно получить с помощью следующей команды:

snowballEdge status -i IP_адрес_основного_узла -m путь/к/файлу/манифеста -u код_разблокировки

 

Ниже приведено краткое описание различных уровней сохранности данных кластера Snowball Edge.

HEALTHY (нормальный). Этот уровень означает, что кластер Snowball Edge работает с полной мощностью.

REDUCED (пониженный). Этот уровень означает, что кластер Snowball Edge работает не на полной мощности, поскольку одно или несколько устройств недоступны. Кластер при этом может читать и записывать данные в нормальном режиме, однако рекомендуется проверить состояние питания и сети всех устройств Snowball Edge, чтобы убедиться, что они функционируют должным образом. Если одно или несколько устройств Snowball Edge по-прежнему не работают, следует заказать замену.

AT RISK (под угрозой). Этот уровень означает, что кластер Snowball Edge работает с сильно уменьшенной мощностью, поскольку одно или несколько устройств Snowball Edge недоступны. Если кластер находится в этом состоянии, запись данных в кластер не производится, однако операции чтения выполняются нормально. Рекомендуется проверить состояние питания и сети всех устройств Snowball Edge, чтобы обеспечить их нормальную работу. Если одно или несколько устройств Snowball Edge по-прежнему не работают, закажите замену и обратитесь в службу поддержки AWS.

DATA UNAVAILABLE (данные недоступны). Этот уровень означает, что кластер Snowball Edge работает неправильно, а некоторые данные будут недоступны. Если кластер находится в этом состоянии, читать или записывать данные невозможно. Рекомендуется проверить состояние питания и сети всех устройств Snowball Edge, чтобы обеспечить их нормальную работу. Если какое-либо устройство (или устройства) Snowball Edge по-прежнему не работает, немедленно обратитесь в службу поддержки AWS.

Вопрос: Каковы различные состояния, в которых может находиться конкретное устройство в кластере Snowball Edge?

Ниже приведено краткое описание различных типов состояний, в которых может находиться конкретное устройство в кластере Snowball Edge.

AVAILABLE (доступно). Это состояние означает, что устройство доступно для использования в кластере.

REMOVED (удалено). Это состояние означает, что устройство было удалено из кластера.

Состояние конкретного узла в кластере Snowball Edge можно узнать, используя следующую команду.

snowballEdge status -i IP_адрес_узла -m путь/к/файлу/манифеста -u код_разблокировки

Вопрос: Можно ли увеличить емкость кластера Snowball Edge путем добавления узлов?

В кластер Snowball Edge можно добавить новый узел, если из кластера был удален нерабочий узел или нужно увеличить локальное хранилище. Чтобы добавить новый узел, необходимо заказать замену. Заказать узел можно в консоли, с помощью SDK или интерфейса командной строки AWS.

Вопрос: Можно ли удалить узел из кластера Snowball Edge?

Если требуется замена узла, его можно удалить из кластера Snowball Edge. Это может потребоваться, если один из узлов работает нестабильно, не включается или неисправен. Чтобы удалить узел, следует отключить его питание и ввести команду «snowballEdge removenode».

Вопрос: Как заменить вторичный узел в кластере Snowball Edge?

Чтобы заказать узел для кластера Snowball Edge, можно перейти в Консоль управления AWS и заказать устройство на замену. После получения устройства необходимо выполнить следующие действия.

  • Удалить нерабочее устройство из кластера, отключив его от питания и использовав команду «removenode».

snowballEdge removenode -i IP_адрес_основного_узла -n Job_Id_удаляемого_узла -m путь/к/файлу/манифеста -u код_разблокировки

  • Затем следует подключить полученное на замену устройство Snowball Edge и подождать около 10 минут, пока выполняется его загрузка. Если используется DHCP, то устройство автоматически получит IP-адрес. Если используется статический IP-адрес, его необходимо назначить вручную.
  • После этого следует добавить новое устройство Snowball Edge, используя следующую команду:

snowballEdge addnode -i IP_адрес_основного_узла -a IP_адрес_добавляемого_узла -m путь/к/файлу/манифеста -u код_разблокировки

Вопрос: Как заменить неисправный основной узел в кластере Snowball Edge?

Если основной узел перестает работать, его можно заменить, используя инструкции, приведенные ниже.

  • Выключить существующий основной узел.
  • Включить все существующие вторичные узлы и подождать приблизительно 10 минут, пока выполняется загрузка всех узлов.
  • Выполнить команду разблокировки для нового основного узла:

snowballEdge unlock -i IP_адрес_основного_узла -s IP_адрес_второстепенного_узла_1 -s IP_адрес_второстепенного_узла_2 -s IP_адрес_второстепенного_узла_3 -s IP_адрес_второстепенного_узла_4 -m путь/к/файлу/манифеста -u код_разблокировки

  • Закажите новый узел в Консоли управления AWS, чтобы заменить основной узел.
  • Когда устройство Snowball Edge будет доставлено, подключите его и подождите приблизительно 10 минут, пока выполняется загрузка. Если используется DHCP, то устройство автоматически получит IP-адрес. Если используется статический IP-адрес, его необходимо назначить вручную.
  • После этого следует добавить новое устройство Snowball Edge, используя следующую команду:

snowballEdge addnode -i IP_адрес_основного_узла -a IP_адрес_добавляемого_узла -m путь/к/файлу/манифеста -u код_разблокировки

Вопрос: Что произойдет при удалении более одного устройства Snowball Edge из кластера Snowball Edge?

Удалить более одного устройства Snowball Edge из кластера Snowball Edge в какой-либо момент времени нельзя.

Вопрос: Можно ли продолжать использование кластера Snowball Edge во время замены вторичного устройства Snowball Edge?

Да. Продолжать использовать кластер Snowball Edge можно даже во время замены одного устройства Snowball Edge. До тех пор, пока в качестве состояния всех узлов не будет отображаться «AVAILABLE», кластер будет работать в режиме пониженной надежности.  

Вопрос: Можно ли продолжать использовать кластер Snowball Edge во время замены основного устройства Snowball Edge?

Да. Если основной узел недоступен, чтение данных можно осуществлять с любых других узлов в кластере. При этом, пока основной узел не будет восстановлен, нельзя осуществлять запись данных в кластер Snowball Edge. Рекомендуется сразу перезапустить кластер и выбрать новый основной узел или заказать новый узел, если устройство не работает.

Вопрос: Что произойдет с сохраненными данными после замены узла в кластере Snowball Edge?

После замены узла кластер Snowball Edge перераспределит данные между остальными узлами, что позволит продолжать использовать его в качестве надежного хранилища.

Вопрос: Можно ли выбрать для заменяющего узла другие параметры задания (адрес, скорость доставки, функции Lambda, роли IAM, ключи KMS, оповещения SNS), отличные от тех, которые были установлены при заказе кластера Snowball Edge?

Нет. Каждый заменяющий узел предварительно настроен на использование той же конфигурации заданий, что была настроена для кластера Snowball Edge.

Вопрос: Можно ли выбрать другую функцию Lambda в моем заменяющем узле?

Да. Другую функцию Lambda можно выбрать, если она использует ту же корзину S3, которая изначально была сконфигурирована для работы с кластером Snowball Edge.

Вопрос: Можно ли продолжать использовать прежний ключ манифеста кластера Snowball Edge и код разблокировки после заказа заменяющего узла?

Нет. После заказа заменяющего устройства создается новый манифест кластера и код разблокировки, которые необходимо использовать во всех последующих операциях кластера Snowball Edge.

Вопрос: Что произойдет, если один из моих узлов окажется недоступен?

Использование кластера Snowball Edge можно продолжать, даже если он работает в режиме пониженной надежности. Незамедлительно закажите новое устройство Snowball Edge для замены, чтобы можно было заменить проблемный узел новым устройством.

Вопрос: Что произойдет, если два из моих узлов окажутся недоступны?

Использование кластера Snowball Edge можно будет продолжать, но следует обратить внимание на то, что он будет работать в режиме только для чтения, при этом безопасность существующих данных в кластере будет под угрозой. Незамедлительно закажите два новых устройства Snowball Edge для замены, чтобы можно было заменить проблемные узлы новыми устройствами Snowball Edge.

Вопрос: Что произойдет, если три или более из моих узлов окажутся недоступны?

Использовать кластер Snowball Edge будет нельзя, при этом существующие в кластере данные будут находиться под угрозой. Немедленно обратитесь в службу поддержки AWS, если три или более устройств Snowball Edge не работают.

Вопрос: Как долго можно использовать кластер Snowball Edge локально в моем местоположении?

Максимальная продолжительность локальной работы кластера Snowball Edge в местоположении клиента составляет 360 дней с момента создания заказа. После этого истекает срок действия сертификатов в кластере, поэтому все устройства Snowball Edge в кластере необходимо будет вернуть либо заказать новые устройства для замены.

Вопрос: Можно ли заранее заказать устройства для замены кластера Snowball Edge?

Да. Чтобы заранее заказать устройства для замены, нужно создать задание кластера Snowball Edge, а затем создать задание для заказа заменяющих устройств Snowball Edge. Заменяющие устройства не требуется подключать к исходному кластеру Snowball Edge, пока одно из устройств не станет неработоспособным. Как только устройство Snowball Edge станет неработоспособным, можно удалить это устройство, а затем добавить заменяющее устройство.

Вопрос: Может ли кластер Snowball Edge поставляться с предварительно загруженными данными из существующей корзины S3?

Нет. Однако можно разместить заказ на два задания Snowball: задание на поставку кластера и задание, связанное с экспортом. Кластер Snowball Edge будет поставляться из AWS пустым, но в качестве задания экспорта можно указать устройство Snowball (или Snowball Edge), которое потом можно использовать для импорта данных в кластер Snowball Edge.

Вопрос: Можно ли загрузить данные из всего кластера Snowball Edge обратно в AWS, используя отдельные узлы кластера?

Нет. Кластер Edge Snowball можно использовать только для локального хранения данных и вычислений. Его нельзя использовать для импорта данных в AWS. Чтобы импортировать данные из своего кластера, необходимо заказать дополнительные устройства AWS Snowball (или AWS Snowball Edge), а затем подключить их к сети, в которой работает кластер Snowball Edge. После этого можно использовать S3 Adapter на устройстве импорта (Snowball или Snowball Edge) и кластер для передачи данных между ними. В зависимости от общего объема данных, используемых в кластере, может потребоваться заказать несколько устройств импорта для отправки данных обратно в AWS.

Вопрос: Существует ли единая конечная точка, совместимая с S3, для подключения к кластеру Snowball Edge?

Нет. У каждого узла есть уникальная конечная точка S3 для операций чтения. Однако для операций записи можно использовать только конечную точку S3 основного узла.

Вопрос: Изменится ли S3-совместимая конечная точка, если отключить узел, на котором она запущена?

Да, если отключить основной узел, IP-адрес изменится. В качестве конечной точки будет работать IP-адрес нового основного узла, который вы выбрали.

Вопрос: Изменится ли конечная точка NFS, если отключить узел, на котором она запущена?

Да, если отключить основной узел, адрес NFS изменится. В качестве конечной точки будет работать IP-адрес основного узла, который вы выбрали.

Вопрос: Увеличивается ли при загрузке данных в кластер пропускная способность передачи данных в сети в зависимости от количества узлов?

Нет. Все операции записи должны проходить через основной узел, поэтому пропускная способность загрузки будет ограничена пропускной способностью одного узла. Однако пропускная способность операций чтения может быть выше, если чтение осуществляется из нескольких устройств параллельно.

Вопрос: При использовании кластеризации вычислительная мощность линейно увеличивается?

Нет. Кластеризация только увеличивает доступный объем надежного хранилища. Общий объем вычислительной мощности, доступный в кластере, ограничен одним узлом.

Вопрос: Где именно в кластере Snowball Edge выполняются вычисления?

В каждом кластере есть основной узел, где выполняются вычисления. Чтобы определить, какой узел является основным в кластере, введите следующую команду:

snowballEdge status -i IP_адрес_любого_узла -m путь/к/файлу/манифеста -u код_разблокировки

Вопрос: Если в качестве основного узла будет выбран другой узел, будет ли состояние моего собственного приложения сохраняться при переходе между инстансами?

Нет. Рекомендуется создать приложение без сохранения состояния или сохранять все состояния в хранилище NFS/S3, чтобы данные можно было прочитать из постоянного хранилища в случае необходимости перезапуска основного узла.

Вопрос: Можно ли обновить функцию Lambda в моем кластере Snowball Edge, пока он находится локально?

Нет. Обновить функцию Lambda локально нельзя.


Вопрос: Что такое AWS Greengrass?

На устройства Snowball Edge установлена встроенная версия сервиса AWS Greengrass, который позволяет выполнять функции AWS Lambda на языке Python в ответ на события PUT с объектами S3.

Вопрос: Какие возможности AWS Greengrass доступны на устройствах Snowball Edge?

Сервис Greengrass Core, работающий на Snowball Edge, позволяет развертывать функции Lambda, написанные на Python, на устройствах Snowball Edge и запускать эти функции с помощью сообщений MQTT. При создании задания для Snowball Edge хотя бы с одной предварительно загруженной функцией Lambda устройство Snowball Edge будет по умолчанию выделено как устройство Greengrass Core. При подключении Snowball Edge к Интернету можно обновлять, добавлять и удалять функции Lambda на устройстве с помощью консоли Greengrass. Можно также размещать функции Lambda, способные запускаться сообщениями MQTT, отличными от PUT сервиса S3. Кроме того, можно также обновлять связанную группу Greengrass из консоли Greengrass и использовать устройство в группе как любое другое устройство Greengrass Core.

Вопрос: Не могли бы вы предложить варианты примеров использования Greengrass на Snowball Edge?

С помощью Greengrass Core на устройстве Snowball Edge можно создавать собственные функции Lambda для выполнения локальной обработки или предварительной обработки данных аналогично тому, как выполняется запись на устройство Snowball Edge посредством операций PUT сервиса S3 и доступных конечных точек, совместимых с S3. Snowball Edge также можно использовать в качестве ядра группы устройств IoT в сервисе Greengrass. Это позволяет, к примеру, собирать и анализировать потоки данных с датчиков или сжимать изображения в режиме реального времени.

Вопрос: Как использовать сервис Greengrass на Snowball Edge?

С помощью консоли управления AWS Snowball или API Job Management можно привязать новые или существующие функции Lambda к предварительно сконфигурированным корзинам S3 на устройстве Snowball Edge перед его отправкой пользователю. После прибытия устройства его можно разблокировать и подключить к Интернету, чтобы сервис Greengrass в облаке мог отправить сертификаты, необходимые для работы Snowball Edge в качестве ядра группы Greengrass.

Вопрос: Можно ли использовать AWS Greengrass на кластере Snowball Edge?

Greengrass можно использовать на кластере устройств Snowball Edge абсолютно так же, как и на отдельном устройстве Snowball Edge, при этом каждый узел кластера будет уникальным устройством ядра AWS Greengrass.

Вопрос: Сколько функций Lambda может быть создано для каждого задания?

При создании задания каждая функция Lambda может быть привязана к одной корзине S3 на Snowball Edge. После получения, разблокировки устройства и его подключения к Интернету можно добавлять, удалять или обновлять функции Lambda по своему усмотрению. Если каждой из функций выделено 128 МБ памяти, можно использовать до 7 функций Lambda одновременно.

Вопрос: Greengrass на Snowball Edge можно использовать в любом регионе AWS?

В настоящее время Greengrass на Snowball Edge можно использовать только в регионах с поддержкой сервиса Greengrass. Перечень регионов AWS с поддержкой Greengrass см. в таблице регионов. В регионах, которые поддерживают только AWS Snowball Edge, но не AWS Greengrass, можно создавать задания для устройств Snowball Edge без доступа к вычислительным функциям.


Вопрос: Какова стоимость использования Snowball Edge?

Стоимость каждого задания Snowball Edge, включая работу с устройством и операции в ЦОД AWS, составляет 300 USD. В эту стоимость включено использование устройства на территории клиента в течение 10 дней. День получения и день отправки устройства в этот срок не включаются. По истечении этого срока за каждый дополнительный день нахождения устройства Snowball Edge на территории пользователя начисляется плата в размере 30 USD. Передача данных в AWS не тарифицируется, для хранения данных применяются тарифы стандартного хранилища Amazon S3. Стоимость экспорта данных составляет 0,03 USD/ГБ. Стоимость доставки рассчитывается на основании стандартных тарифов транспортной компании с учетом места назначения и выбранного варианта доставки (например, в течение 2 дней или на следующий день). Вариант доставки по умолчанию – в течение 2 дней.

Пример расчета стоимости

В примере расчета стоимости, приведенном ниже, показана ориентировочная стоимость передачи 90 ТБ данных в AWS с помощью одного устройства Snowball Edge емкостью 100 ТБ при условии, что оно находилось у клиента в течение 15 дней (было получено в 1-й день и возвращено на 15-й день).

День получения устройства и день его обратной отправки в AWS считаются днями доставки и в данном случае не входят в число 10 дней бесплатного использования. Это значит, что устройство находилось на территории клиента в течение 13 дней, 10 из которых были бесплатными. Таким образом, на передачу данных было затрачено 3 дополнительных дня.

Стоимость сервиса:                                       300 USD

Стоимость дополнительных дней (3 дня, 30 USD/день):     90 USD

Стоимость доставки:                             зависит от расстояния

Стоимость передачи данных:                            0 USD

Вопрос: Взимается ли плата за использование Amazon S3, если я использую Snowball Edge с конечной точкой, совместимой с S3?

Нет, за использование Snowball Edge с конечной точкой, совместимой с S3, дополнительная плата не взимается. Если устройство Snowball Edge передает данные в Amazon S3, взимается стандартная плата за запросы и хранение данных в S3.

Вопрос: Можно ли приобрести устройство Snowball Edge?

Нет. Устройства Snowball Edge доступны только в рамках задания, оплачиваются по факту использования и не предназначены для покупки.