Publicado en: Nov 6, 2018
Ahora puede usar Apache Flink 1.6.0, Apache Zeppelin 0.8.0 y S3 Select con Apache Hive y Presto en la versión 5.18.0 de Amazon EMR. Flink 1.6.0 incorpora varias actualizaciones y características nuevas, incluida la compatibilidad nativa para TTL de estado, que permite controlar el acceso a los estados de Flink, y la compatibilidad con envíos de trabajos basados en HTTP/REST que permiten lograr una mejor integración con entornos de contenedores en el clúster. También incluye varias mejoras para la API Table y para SQL que simplifican las ejecuciones de consultas en lote y de streaming e incorpora compatibilidad con SQL para el formato de datos Avro. Zeppelin 0.8.0 incluye compatibilidad para la ejecución del intérprete Spark en el modo de clúster Apache Hadoop YARN, compatibilidad con el intérprete Ipython y capacidad para usar Apache HDFS como almacenamiento backend para guardar y leer archivos de bloc de notas de Zeppelin.
Con la versión 5.18.0 de EMR, ahora puede usar S3 Select con Hive y Presto. Con S3 Select es posible que las aplicaciones recuperen únicamente un subconjunto de datos a partir de un objeto almacenado en Amazon S3. Esto mejora el rendimiento al reducir el volumen de datos que debe ser transferido al clúster de EMR y procesado por este al momento de ejecutar consultas de Hive y Presto. Vaya a las páginas S3 Select con Hive y S3 Select con Presto para obtener más información acerca de estas características.
Además, con esta versión, también puede usar las ediciones actualizadas de Apache Spark 2.3.2, Apache HBase 1.4.7 y Presto 0.210.
Puede crear un clúster de Amazon EMR con la versión 5.18.0, para lo cual deberá elegir la etiqueta de versión "emr-5.18.0" en la consola de administración, el SDK o la CLI de AWS. Puede seleccionar Flink, HBase, Presto y Zeppelin para instalar estas aplicaciones cuando lance su clúster de EMR. Consulte la documentación de Amazon EMR para obtener más información sobre la versión 5.18.0 de EMR, Flink 1.6.0, HBase 1.4.7, Spark 2.3.2, Presto 0.210 y Zeppelin 0.8.0.
La versión 5.18.0 de Amazon EMR ya se encuentra disponible en todas las regiones en las que se admite Amazon EMR.
Puede mantenerse informado acerca de las versiones de EMR si se suscribe a la fuente RSS sobre notas de versión de EMR. Use el ícono de RSS ubicado en la parte superior de la Guía de versiones de EMR para vincular el URL de la fuente directamente a su lector de fuentes favorito.