Publicado: Nov 20, 2023
Anunciamos a disponibilidade geral de dois novos recursos para aprimorar o monitoramento e a depuração dos trabalhos do AWS Glue: interface de usuário do Apache Spark com tecnologia sem servidor do AWS Glue e métricas de observabilidade do AWS Glue. A interface de usuário do Spark com tecnologia sem servidor do AWS Glue é um novo recurso que permite obter informações detalhadas sobre trabalhos do Spark no AWS Glue. Esse lançamento permite que você veja os detalhes de qualquer trabalho do Spark no AWS Glue executado no AWS Glue Studio. Com a interface de usuário do Spark com tecnologia sem servidor do AWS Glue, você pode obter informações sobre cenários, tarefas e executores do agendador. As métricas de observabilidade do AWS Glue oferecem insights adicionais sobre confiabilidade, performance, throughput e utilização de recursos do trabalho. Com esses dois novos recursos, você pode depurar classes de erro comuns com a causa-raiz, analisar a performance agregada de operadores e monitorar distorções de dados em trabalhos do Glue.
Você pode usar o monitoramento de tarefas do AWS Glue Studio para visualizar as métricas da interface do usuário do Spark com tecnologia sem servidor e de observabilidade. A interface de usuário do Spark com tecnologia sem servidor pode ser acessada em uma nova guia “Spark UI” na página do trabalho do Glue no Glue Studio. Você também pode navegar até a página de monitoramento de execução do trabalho no AWS Glue Studio para ver as métricas de interface do usuário do Spark com tecnologia sem servidor e observabilidade. A interface do usuário do Spark com tecnologia sem servidor do AWS Glue é totalmente gerenciada. Você não precisa gerenciar nenhuma infraestrutura. As métricas de observabilidade do AWS Glue são publicadas no Amazon CloudWatch.
As métricas de interface de usuário do Spark com tecnologia sem servidor e observabilidade do AWS Glue estão disponíveis ao usar o AWS Glue 3.0 e versões posteriores em todas as regiões comerciais que oferecem o AWS Glue.
Para saber mais, acesse a documentação sobre as métricas da interface de usuário do Spark com tecnologia sem servidor e de observabilidade.