Apache Spark 故障排除和升级代理现已作为 Kiro 能力包推出

发布于: 2026年4月3日

适用于 Amazon EMR 的 Apache Spark 故障排除代理和升级代理现已作为 Kiro 能力包推出,用户可直接在 Kiro 中一键执行由人工智能辅助的 Spark 操作。有了这些能力包,数据工程师可以将故障排除时间从几小时缩短到几分钟,并将 Spark 版本升级周期从几个月缩短至几周。

当 Spark 任务失败时,故障排除能力包通过分析 EC2 和 EMR Serverless 上 EMR 中的日志、指标和配置来确定根本原因,并为 PySpark 应用程序提供具体的代码建议。升级能力包通过远程验证和 EMR 上的数据质量比较来处理代码转换和依赖关系解析,从而自动进行 Spark 版本升级,例如从 EMR 6.5 升级到 EMR 7.12。这两种能力包均通过适用于 AWS 的 MCP 代理(支持基于 IAM 角色的身份验证)连接到 Spark 代理,并且所有操作都会记录在 AWS CloudTrail 中,以实现全面的可审计性。

所有 AWS 商业区域的 Amazon EMR 均提供 Apache Spark 故障排除和升级能力包。要开始使用,请安装 Kiro IDE 中的 Apache Spark 故障排除能力包升级能力包。有关更多信息,请参阅故障排除代理升级代理文档。