Anuncio de la solución de problemas con IA generativa para Apache Spark en AWS Glue (versión preliminar)
AWS Glue anuncia la solución de problemas con IA generativa para Apache Spark, una nueva capacidad que ayuda a los ingenieros y científicos de datos a identificar y resolver rápidamente los problemas en sus trabajos de Spark. La solución de problemas para Spark utiliza tecnologías de machine learning e IA generativa para proporcionar un análisis automatizado de la causa raíz de los problemas en los trabajos de Spark, junto con recomendaciones prácticas para corregir los problemas identificados.
AWS Glue es un servicio de integración de datos escalable y sin servidor que facilita el descubrimiento, la preparación y la combinación de datos para el desarrollo de aplicaciones, machine learning y análisis. Con la solución de problemas de Spark, puede iniciar con un solo clic el análisis automatizado de los trabajos con error en la consola de AWS Glue. Esta característica proporciona el análisis de la causa raíz y los pasos de solución para problemas de Spark difíciles de diagnosticar, como errores de memoria, problemas de distorsión de datos y excepciones de recursos no encontrados. Esto lo ayuda a reducir el tiempo de inactividad en las canalizaciones de datos críticas. Con la tecnología de Amazon Bedrock, la solución de problemas para Spark reduce el tiempo de depuración de días a minutos.
La versión preliminar de solución de problemas con IA generativa para Apache Spark está disponible para los trabajos que se ejecutan en AWS Glue 4.0 y en las siguientes regiones de AWS: Este de EE. UU. (Norte de Virginia), Oeste de EE. UU. (Oregón), Europa (Irlanda) y Este de EE. UU. (Ohio), etc. Para obtener más información, visite el sitio web de AWS Glue, lea el blog de lanzamiento o lea la documentación.