Amazon EMR on EKS 現已支援 Apache Spark 故障排除代理程式
Amazon EMR on EKS 現已支援 Apache Spark 故障排除代理程式。資料工程師現在可透過自然語言診斷 EMR on EKS 任務故障,取得自動化根本原因分析與 PySpark 程式碼推薦,無須手動瀏覽分散式日誌和 Spark History Server 資料。
代理程式會分析 Spark History Server 資料、分散式執行器日誌和叢集組態,以識別記憶體錯誤、資料偏斜、資源爭用和連線故障等問題。透過此次啟動,Spark 故障排除代理程式現已涵蓋所有 EMR 部署選項:EMR on EC2、EMR Serverless 和 EMR on EKS。可直接從 EMR on EKS 主控台的失敗任務中,透過「使用 AI 進行故障排除」選項存取代理程式。此外,您可透過 MCP (Model Context Protocol),使用任何相容的 AI 程式碼代理,包括 Kiro、Claude Code 和 Cursor,來使用代理程式。所有操作皆為唯讀、使用 IAM 角色進行驗證,並記錄於 AWS CloudTrail。
適用於 Amazon EMR on EKS 的 Spark 故障排除代理程式,適用於所有提供 SageMaker Unified Studio 服務的 AWS 區域。若要開始使用,請前往 EMR on EKS 主控台,或在您偏好的 AI 程式碼代理中設定 MCP 伺服器。如需詳細指引,請參閱 EMR 故障排除代理程式文件。