Publicado en: Jun 24, 2021
Ahora puede especificar hasta 30 tipos de instancias EC2 para cada uno de los grupos de nodos maestros, principales y de tareas al utilizar flotas de instancias de EMR con estrategia de asignación. Anteriormente, esto estaba limitado a 15 para los nodos de tareas, y a solo cinco para los nodos maestros y principales. Este aumento permite especificar una gama más amplia de tamaños, generaciones y familias de instancias en las que pueden operar las cargas de trabajo para mejorar el acceso a la capacidad spot y bajo demanda.
Puede utilizar los límites incrementados para aumentar el acceso a la capacidad de Spot y reducir el riesgo de interrupciones de Spot. Al utilizar la estrategia de asignación, EMR elige los grupos de Spot con mayor disponibilidad de la lista de tipos de instancia seleccionados. Al agregar más tipos de instancias a la lista, permite que EMR considere más grupos, probablemente con mayor disponibilidad, para aprovisionar capacidad. Cuando se presentan interrupciones, EMR puede reemplazar esa capacidad más rápidamente, ya que puede elegir entre un conjunto más amplio de instancias.
En el caso de los clústeres grandes, se puede obtener un mejor acceso a la capacidad bajo demanda si se especifican tantos tipos de instancia como sea posible. En este caso, EMR es capaz de elegir entre un conjunto más amplio de instancias y aprovisionar capacidad para los diferentes tipos de instancias hasta satisfacer sus necesidades.
Para comenzar, lea Configurar flotas de instancias y la Referencia de la API de EMR.