AWS Glue ahora admite vistas materializadas basadas en Apache Iceberg
AWS Glue ahora admite vistas materializadas, una nueva capacidad que facilita a los equipos de datos la transformación de los datos y acelera el rendimiento de las consultas. Las vistas materializadas son tablas administradas del catálogo de datos de AWS Glue que almacenan los resultados de las consultas precalculados en formato Apache Iceberg y los mantienen actualizados automáticamente a medida que cambian los datos de origen. Esta característica está diseñada para facilitar a los ingenieros de datos y a los equipos de análisis la transformación de los datos en varias etapas, desde los datos sin procesar hasta las tablas analíticas finales, al tiempo que reduce el esfuerzo de ingeniería y la sobrecarga operativa.
Los clientes ahora pueden crear vistas materializadas con la sintaxis estándar de Spark SQL con un cronograma de actualización de datos. El servicio gestiona automáticamente el cronograma de actualización, la detección de cambios, las actualizaciones incrementales y la administración de la infraestructura informática. Los motores Spark de Amazon Athena, Amazon EMR y AWS Glue reescriben las consultas de forma inteligente para usar estas vistas materializadas, lo que acelera el rendimiento hasta 8 veces y reduce los costos de procesamiento. Puede usar motores de consulta SQL como Athena y Redshift para acceder a las vistas materializadas en forma de tablas Iceberg desde los editores de SQL y los cuadernos de Amazon SageMaker.
Las vistas materializadas en AWS Glue están disponibles en Europa (Estocolmo), Asia Pacífico (Tailandia), Asia Pacífico (Bombay), Europa (París), este de EE. UU. (Ohio), Europa (Irlanda), Europa (Fráncfort), América del Sur (São Paulo), Asia Pacífico (Hong Kong), este de EE. UU. (norte de Virginia), Asia Pacífico (Seúl), Asia Pacífico (Malasia), Europa (Londres), Asia Pacífico (Tokio), oeste de EE. UU. (Oregón), oeste de EE. UU (norte de California), Asia Pacífico (Singapur), Asia Pacífico (Sídney), Canadá (centro) y Europa (España). Para obtener más información, visite Trabajar con vistas materializadas en la guía para desarrolladores de AWS Glue.