发布于: Jun 7, 2022
Amazon EMR 6.6 版现支持 Apache Spark 3.2、Apache Spark RAPIDS 22.02、CUDA 11、Apache Hudi 0.10.1、Apache Iceberg 0.13、Trino 0.367 和 PrestoDB 0.267。您可以在 EC2、EKS 和最近发布的 EMR Serverless 上的 EMR 上使用性能优化的 Apache Spark 3.2 版。此外,EC2、EKS 和 Serverless 提供 Apache Hudi 0.10.1 和 Apache Iceberg 0.13。EC2 上的 EMR 和 EMR Serverless 提供 Apache Hive 3.1.2。Trino 0.367 和 PrestoDB 0 .267 仅在 EC2 上的 EMR 上可用。
每个 Amazon EMR 发布版本都有默认的适用于 Amazon EMR 的 Amazon Linux 2(AL2)Amazon 机器映像(AMI)。在 Amazon EMR 6.6 之前,默认 AMI 基于 Amazon EMR 版本发布时可用的最新 Amazon Linux AMI。因此,一个 Amazon EMR 发布版本会“锁定”到所分配到的 AL2 AMI。这意味着对 AL2 的任何新更新都不会自动更新,除非升级 Amazon EMR 版本或手动安装更新。对于 Amazon EMR 6.6 及后续版本,每次您在 EC2 集群上启动 EMR 时,Amazon EMR 都会自动使用最新的 AL2 版本。要了解详情,请参阅我们的文档。
在 Amazon EMR 6.6 版及更高版本中,使用 Log4j 1.x 和 Log4j 2.x 的应用程序将分别升级为使用 Log4j 1.2.17(或更高版本)和 Log4j 2.17.1(或更高版本),并且不需要使用上面提供的引导操作来缓解 CVE 问题。
此外,在 Amazon EMR 6 .6 版中,对于使用 Amazon EMR 默认 AMI 选项并安装了常见应用程序(如 Apache Hadoop、Apache Spark 和 Apache Hive)的集群,其在 EC2 上的 EMR 的启动时间平均缩短了 80 秒。
Amazon EMR 6.6 版已在提供 Amazon EMR 的所有区域正式发布。有关更多详细信息,请参阅 Amazon EMR 区域可用性和我们的发布说明。