Publicado en: Aug 2, 2018
Ahora puede usar Apache Flink 1.5.0 y Apache Livy 0.5.0 en Amazon EMR versión 5.16.0. Flink 1.5.0 tiene muchas características nuevas, incluido un nuevo modelo de implementación que admite la asignación de recursos dinámica en YARN para lograr un uso eficiente de los recursos, compatibilidad con un estado de emisión que permite replicar patrones y reglas de configuración en instancias paralelas de una función, un cliente de CLI de SQL nuevo para ejecutar consultas ad-hoc en transmisiones de datos, la capacidad para almacenar información de estados en discos locales para lograr una recuperación de errores eficiente y más ágil, y otras actualizaciones de rendimiento y procesamiento para trabajos de streaming. Livy 0.5.0 incluye compatibilidad para el interpretador de SparkSQL para ejecutar consultas SQL interactivas, la capacidad para usar varios lenguajes y compartir el SparkContext en una única sesión, la capacidad para compartir variables entre trabajos y otras mejoras. Además, ahora puede usar la versión actualizada de Apache Hadoop 2.8.4, Apache Spark 2.3.1, Presto 0.203, Apache Phoenix 4.14.0 y Apache MXNet 1.2.0.
Puede crear un clúster de Amazon EMR con la versión 5.16.0, para lo cual deberá elegir la etiqueta de versión "emr-5.16.0" en la consola de administración, el SDK o CLI de AWS. Puede elegir Flink, Livy, Hadoop, Spark, Presto, Phoenix y MXNet para instalar estas aplicaciones cuando lance el clúster de EMR. Consulte la documentación de Amazon EMR para obtener más información sobre EMR versión 5.16.0, Flink 1.5.0, Livy 0.5.0, Spark 2.3.1, Presto 0.203, Hadoop 2.8.4, Phoenix 4.14.0 y MXNet 1.2.0
Amazon EMR versión 5.16.0 ya se encuentra disponible en todas las regiones admitidas para Amazon EMR.
Incorporamos una fuente RSS para las notas de versión de EMR. La fuente tiene un resumen de las actualizaciones importantes y un enlace a las notas de versión detalladas. Use el ícono de RSS ubicado en la parte superior de la guía de versión de EMR para vincular la URL de la fuente directamente con su lector de fuentes favorito (http://docs.aws.amazon.com/emr/latest/ReleaseGuide/amazon-emr-release-notes.rss)