发布于: Mar 20, 2023
我们很高兴地宣布,Amazon EMR 支持基于 Graviton3 的实例。现在,您可以在 EC2 和 Amazon EKS 上使用 Amazon EC2 C7G 实例和 EMR。AWS Graviton3 处理器是 AWS Graviton 处理器系列中的最新产品。它们提供更好的计算性能和浮点性能,并支持 DDR5 内存,比 DDR4 提供的内存带宽多 50%。Amazon EMR 推出对 Amazon Elastic Compute Cloud C7g (Graviton3) 实例的支持,这将 Apache Spark 工作负载的性价比提高多达 13%。通过迁移到基于 Graviton3 的实例,您可以将在 EKS 上 EMR 上运行的 Spark 工作负载的性价比提高多达 15%。 本文中用于计算性价比提高幅度的基准来自行业标准的 TPC-DS 基准,并使用了来自 Spark SQL Performance Tests GitHub 存储库的查询,同时应用了以下修复程序。您的工作负载的性能可能有所不同,因此不一定节省数值相当的成本。
此外,EMR 还增加了对以下内容的支持:
- Amazon EMR 推出对 Amazon EC2 C6i、M6i、I4i、R6i 和 R6id 实例的支持,这将 Apache Spark 工作负载的性价比提高了 6% 至 33%
- Amazon EMR 推出对 Amazon EC2 M6a 和 C6a 实例的支持,这将 Apache Spark 工作负载的性价比提高了 15% 至 50%
- 存储优化型实例,具有高达 30TB 的 NVMe SSD 实例存储(lm4gn、ls4gen),
- 内存优化型实例,具有高达 1,952GiB 基于 DRAM 的实例内存 (X1),
- 内存优化型实例和通用实例(r5n、M5、m5dn、r5ad 和 m5ad)。