Amazon EMR auf EKS unterstützt jetzt Apache Spark-Fehlerbehebung-Agent
Amazon EMR auf EKS unterstützt jetzt den Apache Spark-Fehlerbehebung-Agent. Dateningenieure können jetzt EMR bei EKS-Jobausfällen in natürlicher Sprache diagnostizieren und erhalten eine automatische Ursachenanalyse und PySpark-Codeempfehlungen, ohne manuell in verteilten Protokollen und Spark History Server-Daten navigieren zu müssen.
Der Agent analysiert Spark History Server-Daten, verteilte Executor-Protokolle und Cluster-Konfigurationen, um Probleme wie Speicherfehler, Datenverzerrung, Ressourcenkonflikte und Verbindungsfehler zu identifizieren. Mit diesem Launch deckt der Spark-Fehlerbehebung-Agent jetzt alle EMR-Bereitstellungsoptionen ab: EMR auf EC2, EMR Serverless und EMR auf EKS. Auf den Agent kann über die Option „Problembehandlung mit KI“ bei fehlgeschlagenen Aufträgen direkt vom EMR auf der EKS-Konsole aus zugegriffen werden. Darüber hinaus ist der Agent über MCP (Model Context Protocol) mit jedem kompatiblen KI-Codng-Agent wie Kiro, Claude Code und Cursor verfügbar. Alle Operationen sind schreibgeschützt, mit IAM-Rollen authentifiziert und in AWS CloudTrail protokolliert.
Der Spark-Fehlerbehebung-Agent für Amazon EMR auf EKS ist in allen AWS-Regionen verfügbar, in denen SageMaker Unified Studio verfügbar ist. Rufen Sie zunächst EMR auf der EKS-Konsole auf oder richten Sie den MCP-Server in Ihrem bevorzugten KI-Coding-Agent ein. Eine ausführliche Anleitung finden Sie in der Dokumentation zum EMR-Fehlerbehebung-Agent.