Publicado: Apr 5, 2019
Agora é possível especificar um tipo de trabalhador para trabalhos de Apache Spark no AWS Glue para cargas de trabalho que usam muita memória.
Antes, todos os trabalhos de Apache Spark no AWS Glue eram executados com uma configuração padrão de 1 unidade de processamento de dados (DPU) por nó do operador e 2 executores do Apache Spark por nó. Agora é possível escolher entre duas novas configurações: G.1X e G.2X, que oferecem mais memória por executor.
Saiba mais sobre essas opções de configuração na nossa documentação. Essas opções já estão disponíveis em todas as regiões da AWS em que o AWS Glue está disponível, exceto na região AWS GovCloud (Oeste dos EUA).