Publicado en: Dec 19, 2022
Ahora puede consultar las tablas de Delta Lake sin problemas en Amazon Athena, lo que le brinda el beneficio de una mayor eficiencia operativa, un mejor rendimiento de las consultas y una reducción de los costos. Delta Lake es un formato de tabla de código abierto que ayuda a implementar arquitecturas modernas de lagos de datos que se suelen crear en Amazon S3. Antes de este lanzamiento, leer las tablas de Delta Lake en Athena requería un proceso complejo de generación y administración de archivos de metadatos adicionales. Ahora puede usar Athena para consultar las tablas de Delta Lake directamente sin este esfuerzo adicional.
Athena permite realizar análisis interactivos e informes de paneles para los lagos de datos con formato de Delta Lake, y ahora las actualizaciones de las tablas de Delta Lake están disponibles para su análisis en Athena tan pronto como se completan. Athena utiliza los metadatos contenidos en los archivos de Delta Lake para optimizar sus consultas, de modo que pueda reducir los costos de escaneo de los datos y mejorar en hasta un 40 % el rendimiento de sus consultas de Athena. Athena facilita la creación y la administración de tablas de Delta Lake en el catálogo de datos de AWS Glue mediante el uso de declaraciones DDL sencillas, como CREATE EXTERNAL TABLE y DESCRIBE TABLE, que son coherentes con otros tipos de tablas compatibles con Athena. También puede utilizar el rastreador de AWS Glue para descubrir esquemas de tablas de Delta Lake y administrar las actualizaciones de esquemas en el catálogo de datos de Glue para archivos de Delta Lake, lo que permite que los datos recién catalogados estén disponibles para su análisis en Athena sin inconvenientes.
El soporte de lectura mejorado para Delta Lake está disponible en la versión 3 del motor de Athena, se puede usar con los controladores, la API o la consola de Athena y está disponible en todas las regiones compatibles. Para obtener más información sobre la nueva compatibilidad con Delta Lake en Athena, consulte Consultar tablas de Delta Lake en la documentación del usuario de Athena.