Amazon EMR поддерживает приоритизированные и оптимизированные по емкости стратегии распределения для инстансов EC2
Мы рады сообщить, что теперь Amazon EMR на EC2 поддерживает две новые стратегии распределения для парков инстансов: приоритет для инстансов по требованию и приоритет по оптимальной емкости для спотовых инстансов. Стратегии распределения позволяют задавать, каким образом EMR будет осуществлять выбор из списка указанных типов инстансов и зон доступности, чтобы обеспечить необходимую вам емкость ресурсов. Новые стратегии предоставляют дополнительную гибкость и контроль при выделении инстансов для рабочих нагрузок EMR.
Их сегодняшний запуск позволит вам использовать список с учетом приоритета для определения порядка подготовки ваших вычислительных мощностей в EMR. Эта новая функция позволяет указать приоритет для каждого типа инстансов в конфигурации парка. Для инстансов по требованию EMR сначала попытается подобрать ресурсы, используя инстансы с наивысшим приоритетом. Если EMR не сможет полностью сформировать емкость с помощью этого типа инстансов, будут запускаться инстансы со следующим наивысшим приоритетом и т. д. Для спотовых инстансов платформа EMR в первую очередь оптимизирует емкость, но при этом учитывает приоритетные типы инстансов по принципу «лучшее из возможного». Этот вариант отлично подходит для рабочих нагрузок, где требуется свести к минимуму вероятность сбоев, но определенные типы инстансов являются предпочтительными.
Данная функция доступна для всех версий EMR 5.x и более поздних выпусков (кроме 5.0.0 и 5.0.3) во всех регионах AWS, включая регионы AWS GovCloud (США), где доступна платформа Amazon EMR на EC2. Клиенты могут легко настраивать эти стратегии с помощью API, CLI, SDK, консоли и CloudFormation для EMR. Подробнее см. в нашей документации по стратегии распределения для парка инстансов.