O Amazon EMR no EKS agora oferece suporte ao agente de solução de problemas Apache Spark
O Amazon EMR no EKS agora oferece suporte ao agente de solução de problemas do Apache Spark. Os engenheiros de dados agora podem diagnosticar EMR em falhas de trabalho do EKS por meio de linguagem natural, recebendo análises automatizadas de causa raiz e recomendações de código PySpark sem navegar manualmente pelos registros distribuídos e pelos dados do Spark History Server.
O agente analisa os dados do Spark History Server, os registros distribuídos do executor e as configurações do cluster para identificar problemas como erros de memória, distorção de dados, contenção de recursos e falhas de conectividade. Com esse lançamento, o agente de solução de problemas do Spark agora abrange todas as opções de implantação do EMR: EMR no EC2, EMR Serverless e EMR no EKS. O agente pode ser acessado diretamente do EMR no console EKS por meio da opção “Solucionar problemas com IA” em trabalhos com falha. Além disso, o agente está disponível por meio do MCP (Model Context Protocol) usando qualquer agente de codificação de IA compatível, incluindo Kiro, Claude Code e Cursor. Todas as operações são somente para leitura, autenticadas com funções do IAM e registradas no AWS CloudTrail.
O agente de solução de problemas do Spark para o Amazon EMR no EKS está disponível em todas as regiões da AWS onde o Estúdio Unificado SageMaker está disponível. Para começar, acesse o EMR no console EKS ou configure o servidor MCP em seu agente de codificação de IA preferido. Para obter orientação detalhada, consulte a documentação do agente de solução de problemas do EMR.