Объявление о поддержке Apache Airflow 3.0 в Управляемых рабочих процессах Amazon для Apache Airflow
Управляемые рабочие процессы Amazon для Apache Airflow (MWAA) теперь поддерживают Apache Airflow 3.0, последнюю крупную версию платформы оркестрации рабочих процессов. В этом выпуске расширяются возможности по разработке, планированию и мониторингу сложных рабочих процессов, улучшаются эффективность и контроль.
Amazon MWAA – это управляемый сервис для Apache Airflow, который позволяет легко оркестрировать рабочие процессы с помощью знакомой вам платформы Apache Airflow. С появлением версии Apache Airflow 3.0 в MWAA оркестрация рабочих процессов существенно улучшилась, в том числе полностью переработан интерфейс для повышения удобства работы и расширены возможности планирования на основе событий. Эта новая система планирования напрямую запускает рабочие процессы на основе внешних событий, что устраняет необходимость в отдельных конвейерах обновления ресурсов. Недавно представленный пакет Task SDK в Apache Airflow v3.0 на MWAA помогает упростить DAG за счет сокращения шаблонного кода, что делает рабочие процессы более лаконичными, удобочитаемыми и последовательными. Безопасность и изоляция усилены благодаря API выполнения задач, который ограничивает прямой доступ к базе метаданных и управляет всеми взаимодействиями во время выполнения. В этом выпуске также реализована функция заполнения под управлением планировщика, позволяющая лучше контролировать обработку исторических данных. Кроме того, теперь MWAA поддерживает Python 3.12 и содержит критически важные улучшения системы безопасности и исправления ошибок, повышающие общую надежность и безопасность рабочих процессов в средах Amazon MWAA.
Новую среду Apache Airflow 3.0 можно запустить в Amazon MWAA всего несколькими щелчками мыши в Консоли управления AWS во всех поддерживаемых в настоящее время регионах Amazon MWAA. Подробности об Apache Airflow 3.0 см. в документации по Amazon MWAA и журнале изменений Apache Airflow 3.0 в документации по Apache Airflow.
Apache, Apache Airflow и Airflow являются зарегистрированными товарными знаками или товарными знаками Apache Software Foundation в США и (или) других странах.