EC2 实例上的 Amazon EMR 支持优先分配策略和容量-优化-优先分配策略

发布于: 2024年8月19日

我们很高兴地宣布,EC2 上的 Amazon EMR 现在支持两种新的实例集分配策略:优先分配策略(适用于按需型实例)和容量-优化-优先分配策略(适用于竞价型实例)。借助分配策略,您可以决定 EMR 如何从您指定的实例类型和可用区列表中进行选择,以满足容量需求。这些新策略让您在为 EMR 工作负载预置实例时拥有更大的控制权和灵活性。

此次发布后,您可以使用优先列表来确定 EMR 应尝试预置计算容量的顺序。借助这一新功能,您可以在实例集配置中为每种实例类型指定优先级。对于按需型实例,EMR 将首先尝试使用优先级最高的实例类型来满足容量需求。如果 EMR 无法使用该实例类型来满足全部容量需求,则会启动次高优先级的实例,依此类推。对于竞价型实例,EMR 将首先针对容量进行优化,但会尽量遵循实例类型的优先级。这对必须将中断可能性降至最低但又偏好特定实例类型的工作负载非常有用。

此功能适用于所有 AWS 区域(包括提供了 Amazon EC2 上的 Amazon EMR 的 AWS GovCloud(美国)区域)的所有 EMR 5.x 及更高版本(5.0.0 和 5.0.3 除外)。客户可以通过 EMR API、CLI、SDK、控制台和 CloudFormation 轻松配置这些策略。查看我们的实例集分配策略文档,了解更多信息。