Agentes de solução de problemas e atualização do Apache Spark agora disponíveis como saberes do Kiro
O agente de solução de problemas do Apache Spark e o agente de upgrade do Amazon EMR agora estão disponíveis como saberes do Kiro, para oferecer acesso com um clique às operações do Spark assistidas por IA diretamente no Kiro. Com esses saberes, os engenheiros de dados podem reduzir o tempo de solução de problemas de horas para minutos e encurtar as atualizações da versão do Spark de meses para semanas.
Quando uma trabalho do Spark falha, o saber de solução de problemas identifica a causa raiz por meio da análise de logs, métricas e configurações no EMR no EC2 e no EMR Sem Servidor, além de fornecer recomendações de código específicas para aplicações do PySpark. O saber de upgrade automatiza os upgrades de versão do Spark, como a mudança do EMR 6.5 para o EMR 7.12, ao lidar com a transformação do código e a resolução de dependências por meio da validação remota e da comparação da qualidade dos dados no EMR. Ambos os saberes se conectam aos agentes do Spark por meio do Proxy do MCP para AWS com a autenticação baseada em perfis do IAM, e todas as ações são registradas no AWS CloudTrail para garantir total auditabilidade.
Os saberes de solução de problemas e upgrade do Apache Spark estão disponíveis com o Amazon EMR em todas as regiões comerciais da AWS. Para começar a usá-los, instale o saber de solução de problemas do Apache Spark ou o saber de upgrade do Kiro IDE. Para obter mais informações, consulte a documentação do agente de solução de problemas e do agente de upgrade.