Задания потоковой передачи Бессерверной конфигурации Amazon EMR теперь доступны в регионах AWS GovCloud (США)
Бессерверная конфигурация Amazon EMR — это бессерверная опция в Amazon EMR, которая позволяет инженерам по данным и специалистам по обработке данных легко запускать платформы аналитики больших данных с открытым исходным кодом без настройки, управления и масштабирования кластеров или серверов. Сегодня мы рады сообщить, что задания потоковой передачи Бессерверной конфигурации Amazon EMR, позволяющие непрерывно анализировать и обрабатывать потоковые данные, теперь доступны в регионах AWS GovCloud (США).
Потоковая передача данных стала жизненно важной для бизнеса, поскольку она позволяет компаниям получать непрерывную аналитическую информацию из таких источников данных, как датчики, устройства Интернета вещей и веб-журналы. Однако обработка данных потоковой передачи может быть сложной задачей из-за таких требований, как высокая доступность, устойчивость к сбоям и интеграция с сервисами потоковой передачи. Задания потоковой передачи Бессерверной конфигурации Amazon EMR имеют встроенные функции для решения этих проблем. Они обеспечивают высокую доступность благодаря отказоустойчивости в нескольких зонах доступности за счет автоматического переключения на работоспособные зоны доступности. Они также обеспечивают повышенную отказоустойчивость за счет автоматических повторных попыток выполнения заданий в случае сбоев и таких функций управления журналами, как ротация и сжатие журналов, предотвращающих накопление файлов журналов, которое может привести к сбоям при выполнении заданий. Кроме того, задания потоковой передачи Бессерверной конфигурации Amazon EMR поддерживают обработку данных из сервисов потоковой передачи, таких как самоуправляемые кластеры Apache Kafka и Управляемая потоковая передача Amazon для Apache Kafka. Теперь они интегрированы с Потоками данных Amazon Kinesis с помощью нового встроенного Соединителя Потоков данных Amazon Kinesis, что упрощает создание сквозных конвейеров потоковой передачи.
Чтобы начать работу, посетите страницу заданий потоковой передачи Бессерверной конфигурации Amazon EMR в руководстве пользователя Бессерверной конфигурации Amazon EMR.