发布于: Mar 30, 2022

Amazon EMR Managed Scaling 自动调整 EMR 集群的大小以获得最佳性能和资源利用率。今天,我们很高兴地宣布推出 Managed Scaling 的一项新功能,可以防止它缩减为 Apache Spark 存储中间随机数据的实例。在不删除存储中间随机数据的实例的情况下智能地缩减集群可防止任务重试和重新计算,从而提高性能并降低成本。

通过 EMR Managed Scaling,您可以为集群指定计算上限和下限。EMR Managed Scaling 可与 Amazon EC2 竞价型实例一起使用,使得您可以最高可比按需价格优惠 90% 的价格利用未使用的 EC2 容量。EMR Managed Scaling 持续对与集群上运行的工作负载相关的关键指标进行采样,并根据工作负载和利用率调整集群大小。这些指标现在包括监控具有 Apache Spark 中间随机数据的实例。

Amazon EMR 版本 5.34 和 6.4.0 及更高版本支持此功能。您无需再进行任何操作。此功能已在全球 20 个 AWS 区域可用:美国东部(弗吉尼亚北部和俄亥俄)、美国西部(俄勒冈和加利福尼亚北部)、南美洲(圣保罗)、欧洲(法兰克福、爱尔兰、伦敦、米兰、巴黎和 斯德哥尔摩)、加拿大(中部)、亚太地区(香港、孟买、首尔、新加坡、悉尼和东京)、中东(巴林)和非洲(开普敦)。

要了解更多信息,请访问 Managed Scaling 文档了解更多详情。