AWS Glue anuncia la federación de catálogos de Apache Iceberg remotos
AWS Glue anuncia la disponibilidad general de la federación para los catálogos remotos de Iceberg. Esta capacidad ofrece acceso directo y seguro a las tablas de Iceberg almacenadas en Amazon S3 y catalogadas en catálogos remotos mediante los motores de análisis de AWS.
Con la federación de catálogos, puede federarse en catálogos remotos de Iceberg y consultar tablas de Iceberg remotas mediante sus motores de análisis de AWS preferidos, sin mover ni copiar tablas. Sincroniza los metadatos en tiempo real entre el catálogo de datos de AWS Glue y los catálogos remotos cuando los equipos de datos consultan tablas remotas. Esto significa que los resultados de las consultas siempre están completamente actualizados. Ahora puede elegir la mejor relación precio-rendimiento para sus cargas de trabajo al analizar tablas Iceberg remotas con sus motores de análisis de AWS preferidos, manteniendo controles de seguridad coherentes tanto al descubrir como al consultar los datos. La federación de catálogos es compatible con una amplia variedad de motores de análisis, incluidos Amazon Redshift, Amazon EMR, Amazon Athena, AWS Glue, motores de terceros como Apache Spark y Amazon SageMaker con cuadernos sin servidor.
La federación de catálogos usa AWS Lake Formation para los controles de acceso. De este modo, es posible utilizar controles de acceso detallados, compartir entre cuentas y propagar identidades confiables al compartir tablas de catálogos remotos con otros consumidores de datos. La federación de catálogos se integra con las implementaciones de catálogos que admiten las especificaciones REST de Iceberg.
La federación de catálogos está disponible en la consola de Lake Formation y mediante las API y los SDK de AWS Glue y Lake Formation. Esta característica está disponible de forma general en todas las regiones comerciales de AWS en las que están disponibles AWS Glue y Lake Formation. Con solo unos clics en la consola, puede federarse en catálogos remotos, descubrir sus bases de datos y tablas, conceder permisos para acceder a los datos de las tablas y consultar tablas remotas de Iceberg mediante los motores de análisis de AWS. Para obtener más información, consulte la documentación.