发布于: Nov 6, 2023
现在,您可以在 Amazon Managed Workflows for Apache Airflow (MWAA) 上创建 Apache Airflow 版本 2.7 环境并执行可延迟运算符。Apache Airflow 2.7 是最新次要版本的热门开源工具,可帮助客户编写、计划和监控工作流。
Amazon MWAA 是适用于 Apache Airflow 的一项托管式编排服务,使您能够更轻松地在云中设置和运营端到端数据管道。Amazon MWAA 上的 Apache Airflow 版本 2.7 引入了可延迟运算符支持,使更多的任务能够用更少的资源并发运行。可延迟运算符在等待任务完成时腾出工作人员空位,并得到 Amazon EMR、Amazon ECS 和 AWS Glue 等常用 AWS 服务的支持。此更新还带来了集群活动页面、自动安装/拆卸任务和密钥缓存等方面的改进。此外,Amazon MWAA 上的 Airflow 2.7 现已在 Python 3.11 上运行,建立在 Amazon Linux 2023 (AL2023) 基础映像之上,提供增强的安全性、现代化的工具以及对最新 Python 库和功能的支持。
只需在当前所有支持的 Amazon MWAA 区域中的 AWS 管理控制台中单击几下,即可在 Amazon MWAA 上启动新的 Apache Airflow 2.7 环境。要了解有关 Apache Airflow 2.7 的更多信息,请访问 Amazon MWAA 文档、重点介绍最新资讯的博客文章,以及 Apache Airflow 文档中的 Apache Airflow 2.7 变更日志。
Apache、Apache Airflow 和 Airflow 是 Apache Software Foundation 在美国和/或其他国家/地区的注册商标或商标。