Publicado: Mar 30, 2022
O Amazon EMR Managed Scaling redimensiona automaticamente os clusters do EMR para melhor performance e utilização de recursos. Anunciamos um novo recurso no Managed Scaling que impede a redução da escala vertical de instâncias que armazenam dados de rearranjo intermediários para o Apache Spark. A redução inteligente da escala vertical dos clusters sem remover as instâncias que armazenam dados de rearranjo intermediários evita novas tentativas e recálculos de trabalho, o que resulta em melhor performance e custos reduzidos.
Com o EMR Managed Scaling, você especifica os limites de computação mínimo e máximo para os seus clusters. O EMR Managed Scaling pode ser usado com instâncias Spot do Amazon EC2, que permitem que você aproveite a capacidade não utilizada do EC2 com até 90% de desconto em relação aos preços sob demanda. O EMR Managed Scaling coleta continuamente as principais métricas associadas às workloads em execução em clusters e redimensiona os clusters com base na workload e na utilização. Essas métricas agora incluem instâncias de monitoramento que têm dados de rearranjo intermediários para o Apache Spark.
Esse recurso é compatível com as versões 5.34 e 6.4.0 e posteriores do Amazon EMR. Nenhuma outra ação é necessária da sua parte. Esse recurso está disponível em 20 regiões da AWS em todo o mundo: Leste dos EUA (Norte da Virgínia e Ohio), Oeste dos EUA (Oregon e Norte da Califórnia), América do Sul (São Paulo), Europa (Frankfurt, Irlanda, Londres, Milão, Paris e Estocolmo), Canadá (Central), Ásia-Pacífico (Hong Kong, Mumbai, Seul, Singapura, Sydney e Tóquio), Oriente Médio (Bahrein) e África (Cidade do Cabo).
Para obter detalhes adicionais, acesse a documentação do Managed Scaling.