Publicado en: Nov 20, 2023
Presentamos la disponibilidad general de dos nuevas capacidades para mejorar la supervisión y la depuración de los trabajos de AWS Glue: la interfaz de usuario (UI) de Apache Spark sin servidor de AWS Glue y las métricas de observabilidad de AWS Glue. La interfaz de usuario de Spark sin servidor de AWS Glue es una nueva capacidad que le permite obtener información detallada sobre sus trabajos de Spark en AWS Glue. Este lanzamiento le permite ver los detalles de cualquier trabajo de Spark de AWS Glue que se ejecute en AWS Glue Studio. Con la UI de Spark sin servidor de AWS Glue, puede obtener información sobre las etapas, las tareas y los ejecutores del programador. Las métricas de observabilidad de AWS Glue ofrecen información adicional sobre la fiabilidad del trabajo, el desempeño, el rendimiento y la utilización de los recursos. Estas dos nuevas capacidades le permiten depurar las clases de error comunes con la causa raíz, analizar el desempeño agregado de los trabajadores y supervisar los sesgos de datos en sus trabajos de Glue.
Puede utilizar la supervisión de trabajos de AWS Glue Studio para ver tanto la interfaz de usuario de Spark sin servidor como las métricas de observabilidad. Se puede acceder a la interfaz de usuario de Spark sin servidor desde la nueva pestaña Spark UI (Interfaz de usuario de Spark) en la página de su trabajo de Glue Studio. También puede acceder a la página de supervisión de la ejecución de trabajos en AWS Glue Studio para ver tanto la interfaz de usuario de Spark sin servidor como las métricas de observabilidad. La UI de Spark sin servidor de AWS Glue está completamente administrada y no hay ninguna infraestructura que deba administrar. Las métricas de observabilidad de AWS Glue se publican en Amazon CloudWatch.
La UI y las métricas de observabilidad de Spark sin servidor de AWS Glue están disponibles cuando se usa AWS Glue 3.0 y versiones posteriores, y están disponibles en todas las regiones comerciales en las que está disponible AWS Glue.
Para obtener más información, consulte nuestra documentación sobre la UI de Spark sin servidor y las métricas de observabilidad.