Amazon EMR 7.12 ahora admite el formato de tabla Apache Iceberg v3
Amazon EMR 7.12 ya está disponible con el nuevo formato de tabla Apache Iceberg v3 con Apache Iceberg 1.10. Esta versión le permite reducir los costos de la eliminación de datos, fortalecer la gobernanza y la conformidad mediante un mejor seguimiento de los cambios en las filas y mejorar la seguridad de los datos con un control de acceso a los datos más detallado.
Con Iceberg v3, puede eliminar datos de forma rentable porque Iceberg v3 marca las filas eliminadas sin reescribir archivos completos. Así, se aceleran sus canalizaciones de datos y se reducen los costos de almacenamiento. Obtiene mejores capacidades de gobernanza y conformidad mediante el seguimiento automático del historial de creación y modificación de cada fila. Esto crea los registros de auditoría necesarios para los requisitos reglamentarios y la captura de datos de cambios. Puede mejorar la seguridad de los datos con el cifrado en las tablas. Esto lo ayudará a cumplir las normas de privacidad de sus datos más confidenciales.
Con Apache Spark 3.5.6 incluido en esta versión, puede aprovechar estas capacidades de Iceberg 1.10 para crear arquitecturas sólidas del lago de datos en Amazon S3. Esta versión también incluye soporte para las operaciones de gobernanza de datos en sus tablas Iceberg con AWS Lake Formation. Además, esta versión también incluye Apache Trino 476.
Amazon EMR 7.12 está disponible en todas las regiones de AWS que admiten Amazon EMR. Para obtener más información sobre la versión 7.12 de Amazon EMR, consulte la documentación de la versión 7.12 de Amazon EMR.