Publicado: Sep 19, 2019
A partir de hoje, você pode usar o Apache Spark UI para monitorar e inspecionar tarefas de ETL do Glue. O Apache Spark UI oferece uma interface web para visualizar um Directed Acyclic Graph (DAG – Gráfico acíclico direcionado) que representa diferentes estágios na execução de tarefas de ETL do Glue, analisar os planos de consulta do Spark SQL e verificar o histórico de executores do Spark em execução ou encerrados. O Spark UI pode ser usado com as métricas e o registro em log contínuo da tarefa para monitorar e resolver problemas em tarefas complexas do Glue. O Spark UI está disponível para tarefas de ETL e endpoints de desenvolvimento do Glue.
Esse recurso está disponível em todas as regiões onde o AWS Glue está disponível.
Para saber mais sobre esse recurso, acesse nossa documentação.