Publicado en: Dec 29, 2023
La versión 7.0 de Amazon EMR se suministra con Amazon Linux 2023 e incluye Apache Spark 3.5 que se ejecuta en Amazon Corretto versión 17 (creado en OpenJDK) de forma predeterminada. Es compatible con las versiones más recientes de Python 3.9 y glibc 2.34 y le permite garantizar la coherencia de las versiones y actualizaciones de los paquetes en todo su entorno. La última versión incluye AWS SDK para Java 2.20.160 y se actualiza a las versiones más recientes de Apache Flink 1.18 y a los formatos de tablas abiertas más recientes (Apache Iceberg 1.4.2, Apache Hudi 0.14 y Delta 3.0).
La versión 7.0 de Amazon EMR incluye nuevas mejoras que le permiten observar y monitorear automáticamente los clústeres. Puede optar por publicar las métricas del sistema en Amazon CloudWatch, Amazon Managed Service para Prometheus o su clúster de Prometheus autoadministrado, y analizar las métricas mediante el panel de control de CloudWatch, Amazon Managed Grafana o mediante las API. Puede obtener más información en la documentación.
Amazon EMR agregó compatibilidad con 28 nuevas instancias de Amazon EC2 en 2023, que ahora están disponibles en las versiones 5.36.1 y posteriores, 6.10 y posteriores y 7.0 y posteriores de Amazon EMR. Puede ver las instancias disponibles en cada región mediante la API list-supported-instance-types o consultando la documentación.
La versión 7.0 de Amazon EMR está disponible de manera general en todas las regiones en las que el servicio está disponible. Consulte Disponibilidad regional de Amazon EMR y las notas de la versión para obtener más información.