Anunciamos actualizaciones de IA generativa para Apache Spark en AWS Glue (versión preliminar)
AWS Glue anuncia actualizaciones de IA generativa para Apache Spark, una nueva capacidad de IA generativa que permite a los profesionales de datos actualizar y modernizar rápidamente sus trabajos actuales de Spark. Con la tecnología de Amazon Bedrock, esta característica automatiza el análisis y la actualización de los scripts y las configuraciones de Spark, lo que reduce el tiempo de semanas a minutos y el esfuerzo necesarios para las actualizaciones de Spark.
AWS Glue es un servicio de integración de datos escalable y sin servidor que facilita el descubrimiento, la preparación y la combinación de datos para el desarrollo de aplicaciones, machine learning y análisis. Con las actualizaciones de Spark, puede iniciar actualizaciones automatizadas con un solo clic en la consola de AWS Glue para modernizar sus trabajos de Spark de una versión anterior a la versión 4.0 de AWS Glue. Esta característica analiza sus trabajos de Spark basados en Python y genera planes de actualización que detallan los cambios de código y las modificaciones de configuración. Aproveche la IA generativa para mejorar y validar de forma iterativa el código actualizado mediante la ejecución de pruebas como trabajos de Glue. Una vez que la validación se haya realizado correctamente, recibirá un resumen detallado de todos los cambios para su revisión, lo que le permitirá implementar sus trabajos de Spark actualizados de forma segura. Este enfoque automatizado reduce la complejidad de las actualizaciones de Spark y, al mismo tiempo, mantiene la fiabilidad de sus canalizaciones de datos.
La versión preliminar de las actualizaciones con IA generativa para Apache Spark está disponible para AWS Glue en las siguientes regiones de AWS: Este de EE. UU. (Ohio), Este de EE. UU. (Norte de Virginia), Oeste de EE. UU. (Oregón), Asia-Pacífico (Tokio) y Asia-Pacífico (Sídney). Para obtener más información, visite el sitio web de AWS Glue, lea el blog de lanzamiento o lea la documentación.