AWS Glue 5.1 ya está disponible en la región de AWS European Sovereign Cloud
AWS Glue 5.1 ya está disponible en la región de AWS European Sovereign Cloud
AWS Glue es un servicio de integración de datos escalable y sin servidor que simplifica el descubrimiento, la preparación, la transferencia y la integración de datos de varios orígenes. AWS Glue 5.1 actualiza los motores principales a Apache Spark 3.5.6, Python 3.11 y Scala 2.12.18, lo que aporta mejoras de rendimiento y seguridad. Esta versión también actualiza la compatibilidad con las bibliotecas de formato de tabla abierta, incluidas Apache Hudi 1.0.2, Apache Iceberg 1.10.0 y Delta Lake 3.3.2. Además, AWS Glue 5.1 incorpora la compatibilidad con la versión 3.0 del formato Apache Iceberg, que agrega valores de columna predeterminados, vectores de eliminación para tablas “merge-on-read”, transformaciones de varios argumentos y seguimiento del linaje de filas. Esta versión amplía el control de acceso detallado de AWS Lake Formation para operaciones de escritura (tanto en DML como en DDL) para Spark DataFrames y Spark SQL. Anteriormente, esta capacidad se limitaba únicamente a las operaciones de lectura. AWS Glue 5.1 también agrega un control de acceso completo a las tablas de Apache Spark para Apache Hudi y Delta Lake. De este modo, se ofrecen opciones de seguridad más completas para sus datos.
Puede empezar a utilizar AWS Glue 5.1 mediante las API de AWS, AWS CLI, el SDK de AWS o AWS Glue Studio. Para obtener más información, visite la página del producto y nuestra documentación sobre AWS Glue.