Publicado: May 11, 2021
A partir de hoje, o Amazon EMR no Amazon EKS está disponível nas regiões UE (Paris e Estocolmo).
O Amazon EMR on EKS permite que os clientes automatizem o provisionamento e o gerenciamento de estruturas de big data de código aberto no Amazon EKS. Com o EMR no EKS, os clientes agora podem executar aplicativos Spark junto com outros tipos de aplicativos no mesmo cluster do EKS para melhorar a utilização de recursos e simplificar o gerenciamento de infraestrutura. Os clientes podem implantar aplicativos EMR no mesmo cluster EKS que outros tipos de aplicativos, possibilitando o compartilhar recursos e a padronização em uma única solução para operar e gerenciar todos os seus aplicativos. Os clientes têm acesso aos mesmos recursos do EMR no EKS usados atualmente no Amazon EC2, como acesso ao tempo de execução otimizado para o desempenho mais recente do Spark, o EMR Studio (demonstração) para desenvolvimento de aplicativos e uma interface persistente do Spark para depuração.
Para começar, registre seu cluster do EKS com Amazon EMR. Em seguida, defina seu trabalho, incluindo a versão de lançamento de EMR, parâmetros do Spark e dependências das aplicações. O Amazon EMR no Amazon EKS agendará os pods, contêineres e recursos em seu cluster do Amazon EKS. É possível configurar seu trabalho para ser executado em instâncias do Amazon EC2 ou Amazon Fargate se quiser ter uma experiência sem servidor. Você pode criar fluxos de trabalho com o Amazon Managed Workflows para Apache Airflow e analisar a saída com logs de trabalho armazenados no Amazon S3 ou no Amazon CloudWatch.
Para obter mais informações sobre o Amazon EMR on EKS, acesse o Blog de lançamento do documentação do Amazon on EKS, consulte a documentação do Amazon EMR on EKS ou assista à nossa deep-dive tech talk sobre o Amazon EMR on EKS.