Publicado en: Mar 30, 2022

El escalado administrado por Amazon EMR modifica de manera automática el tamaño de los clústeres EMR para un mejor rendimiento y uso de recursos. Hoy nos complace anunciar una nueva capacidad en el escalado administrado que evita la reducción vertical de instancias que almacenan datos de fragmentación intermedia para Apache Spark. La reducción vertical inteligente de clústeres sin eliminar las instancias que almacenan datos de fragmentación intermedia evita los reintentos y reprocesamientos informáticos laborales, lo que se traduce en un mejor rendimiento y menor costo.

Con el escalado administrado de EMR, puede especificar los límites mínimos y máximos de computación para sus clústeres. El escalado administrado de EMR puede usarse con instancias de spot de Amazon EC2 que le permiten aprovechar la capacidad de EC2 no utilizada con un descuento de hasta el 90 % en los precios bajo demanda. El escalado administrado de EMR prueba continuamente métricas clave asociadas con las cargas de trabajo que se ejecutan en clústeres y modifica el tamaño de clústeres según la carga de trabajo y el uso. Estas métricas ahora incluyen instancias de supervisión con datos de fragmentación intermedia para Apache Spark.

Esta capacidad es compatible con las versiones 5.34, 6.4.0 y posteriores de Amazon EMR. No es necesario que realice otra acción. Esta característica está disponible en 20 regiones de AWS en todo el mundo: EE. UU. Este (Norte de Virginia y Ohio), EE. UU. Oeste (Oregón y Norte de California), América del Sur (São Paulo), Europa (Fráncfort, Irlanda, Londres, Milán, París y Estocolmo), Canadá (Central), Asia-Pacífico (Hong Kong, Mumbai, Seúl, Singapur, Sídney y Tokio), Medio Oriente (Baréin) y África (Ciudad del Cabo).

Para obtener detalles adicionales, visite la documentación sobre escalado administrado.