Amazon MWAA представляет вариант бессерверного развертывания для рабочих процессов Apache Airflow
Сервис управляемых рабочих процессов Amazon для Apache Airflow (MWAA) теперь предлагает вариант бессерверного развертывания, который устраняет эксплуатационные издержки, связанные с управлением средами Apache Airflow, и оптимизирует затраты за счет настоящего бессерверного масштабирования. Это новое предложение решает ключевые проблемы, с которыми сталкиваются инженеры по данным и команды DevOps при организации рабочих процессов: масштабируемость операций, оптимизацию затрат и управление доступом.
Бессерверный сервис Amazon MWAA обеспечивает удобную оркестрацию рабочих процессов с автоматическим выделением и масштабированием ресурсов. Рабочие процессы можно определять с помощью конфигураций YAML или баз данных на основе Python с поддержкой более 80 операторов AWS в Apache Airflow версии 3.0. Каждый рабочий процесс выполняется изолированно с отдельными разрешениями Управления идентификацией и доступом AWS (IAM), что обеспечивает безопасный доступ к сервисам и данным AWS. Сервис автоматически выполняет масштабирование всей инфраструктуры, при этом вы платите только за фактическое время вычислений, потраченное на выполнение задачи.
Бессерверный сервис Amazon MWAA доступен в 15 следующих регионах AWS: Азиатско-Тихоокеанский регион (Мумбаи, Сеул, Сидней, Сингапур, Токио), Канада (Центральная), Европа (Ирландия, Лондон, Париж, Стокгольм, Франкфурт), Южная Америка (Сан-Паулу), Восток США (Огайо, Северная Вирджиния), Запад США (Орегон). Подробнее о бессерверном сервисе Amazon MWAA и поддерживаемых операторах AWS см. в документации сервиса и блоге о появлении опции бессерверного развертывания.
Apache, Apache Airflow и Airflow являются зарегистрированными товарными знаками или товарными знаками Apache Software Foundation в США и (или) других странах.