发布于: Aug 2, 2018

现在,您可以在 Amazon EMR 版本 5.16.0 上使用 Apache Flink 1.5.0 和 Apache Livy 0.5.0。Flink 1.5.0 具有多项新功能,其中包括:支持在 YARN 上动态分配资源以高效利用资源的新部署模型、对允许将配置规则和模式复制到函数的所有并行实例的广播状态的支持、可在数据流上运行即席查询的新 SQL CLI 客户端、能够在本地磁盘上存储状态信息以实现更快的高效故障恢复,以及其他针对流式传输作业的性能和吞吐量更新。Livy 0.5.0 支持可运行交互式 SQL 查询的 SparkSQL 解释器、能够使用多种语言并在单个会话中共享 SparkContext、能够在多项作业之间共享变量,并包含其他改进。此外,您现在还可以使用升级版 Apache Hadoop 2.8.4、Apache Spark 2.3.1、Presto 0.203、Apache Phoenix 4.14.0 和 Apache MXNet 1.2.0。

您可以通过从 AWS 管理控制台、AWS CLI 或开发工具包中选择版本标签“emr-5.16.0”来创建包含版本 5.16.0 的 Amazon EMR 集群。在启动 EMR 集群时,您可以选择 Flink、Livy、Hadoop、Spark、Presto、Phoenix 和 MXNet 来安装这些应用程序。有关 EMR 版本 5.16.0Flink 1.5.0Livy 0.5.0Spark 2.3.1Presto 0.203Hadoop 2.8.4Phoenix 4.14.0MXNet 1.2.0 的更多信息,请访问 Amazon EMR 文档

Amazon EMR 版本 5.16.0 现已在所有支持 Amazon EMR 的区域推出。

我们已为 EMR 发行说明添加 RSS 源。该源包含重要更新的简短摘要以及指向详细发行说明的链接。请使用 EMR 版本指南顶部的 RSS 图标,将源 URL 直接链接至您最喜欢的源阅读器 (http://docs.aws.amazon.com/emr/latest/ReleaseGuide/amazon-emr-release-notes.rss)