Apache Spark 故障排除和升級代理程式現已作為 Kiro 功能提供

張貼日期: 2026年4月3日

Amazon EMR 的 Apache Spark 故障排除代理程式和升級代理程式現已經由 Kiro 功能提供,可直接在 Kiro 中存取 AI 輔助 Spark 作業的一鍵存取。有了這些功能,資料工程師可以將故障排除時間從數小時縮短到幾分鐘,並將 Spark 版本升級從數個月壓縮到數週。

當 Spark 任務失敗時,該故障排除功能會透過分析 EMR on EC2 與 EMR 無伺服器的日誌、指標及組態設定來識別根本原因,並針對 PySpark 應用程式提供具體的程式碼建議。這項升級功能會透過在 EMR 上進行遠端驗證和資料品質比對來處理程式碼轉換與相依性解析,自動執行 Spark 版本升級,例如從 EMR 6.5 遷移至 EMR 7.12。這兩項功能皆透過 MCP Proxy for AWS 以 IAM 角色型身分驗證連接至 Spark 代理程式,且所有操作皆會記錄在 AWS CloudTrail 中,以實現完整的稽核性。

Apache Spark 故障排除與升級功能現已於所有 AWS 商業區域的 Amazon EMR 提供使用。若要開始使用,請從 Kiro IDE 安裝 Apache Spark 故障排除功能升級功能。如需詳細資訊,請參閱故障排除代理程式升級代理程式文件。