Publicado: Jan 6, 2022
O Amazon EMR on EKS permite aos clientes executar facilmente estruturas de big data de código aberto como o Apache Spark no Amazon EKS. Os clientes do Amazon EMR on EKS configuram e utilizam o endpoint gerenciado (disponível na visualização prévia) para executar workloads interativas utilizando ambientes de desenvolvimento integrados (IDE) como o EMR Studio.
Cientistas e analistas de dados podem precisar utilizar bibliotecas em seus códigos que não estão disponíveis na distribuição pública do tempo de execução do Spark do Amazon EMR on EKS. Os clientes utilizam a funcionalidade imagens personalizadas para criar um driver Spark e o executor de imagens que contenham as suas dependências de aplicações. Até o momento, os clientes que utilizaram os endpoints gerenciados do Amazon EMR on EKS para executar workloads interativas foram incapazes de utilizar imagens personalizadas. Com esta versão, é possível construir uma imagem personalizada com as dependências de sua aplicação e utilizar a imagem em seus trabalhos interativos por meio de endpoints gerenciados.
Para saber mais sobre como construir e utilizar uma imagem personalizada, consulte a documentação. O suporte de imagem personalizada para endpoints gerenciados é compatível com todas as versões do Amazon EMR on EKS e está disponível em todas as regiões nas quais o Amazon EMR on EKS está disponível atualmente.