Amazon MWAA 推出适用于 Apache Airflow 工作流的无服务器部署选项
Amazon Managed Workflows for Apache Airflow (MWAA) 现在提供无服务器部署选项,消除了管理 Apache Airflow 环境的运营开销,同时通过真正的无服务器扩展实现了成本优化。这一新服务解决了数据工程师和 DevOps 团队在编排工作流时面临的关键挑战:运营可扩展性、成本优化和访问管理。
Amazon MWAA Serverless 提供无缝的工作流编排,具备自动资源预置和扩展功能。您可以使用 YAML 配置或基于 Python 的 DAG 来定义工作流,并支持 Apache Airflow v3.0 提供的 80 余种 AWS 操作符。每个工作流都在隔离环境中运行,具有独立的 AWS Identity and Access Management (IAM) 权限,确保对 AWS 服务和数据的安全访问。该服务自动处理所有基础设施的扩展,您只需为任务执行期间实际消耗的计算时间付费。
Amazon MWAA Serverless 现已在以下 15 个 AWS 区域推出:亚太地区(东京)、亚太地区(首尔)、亚太地区(孟买)、亚太地区(新加坡)、亚太地区(悉尼)、加拿大(中部)、欧洲地区(爱尔兰)欧洲地区(斯德哥尔摩)、欧洲地区(法兰克福)、欧洲地区(伦敦)、欧洲地区(巴黎)、南美洲(圣保罗)、美国东部(弗吉尼亚州北部)、美国东部(俄亥俄州)和美国西部(俄勒冈州)。如需进一步了解 Amazon MWAA Serverless 和支持的 AWS 操作符,请访问 Amazon MWAA Serverless 文档和 Amazon MWAA Serverless 发布博客。
Apache、Apache Airflow 和 Airflow 是 Apache Software Foundation 在美国和/或其他国家/地区的注册商标或商标。