Publicado: Sep 15, 2023

Hoje, temos o prazer de anunciar que o Amazon EMR no EKS já oferece suporte ao Apache Flink, disponível em versão de demonstração para o público em geral. Com esse lançamento, os clientes que já usam o EMR podem executar aplicações do Apache Flink com outros tipos de aplicações no mesmo cluster do Amazon EKS, o que ajuda a melhorar a utilização de recursos e simplificar o gerenciamento da infraestrutura. Agora, clientes que já executam estruturas de big data no Amazon EKS podem permitir que o Amazon EMR automatize o provisionamento e o gerenciamento.

O Apache Flink é uma estrutura de código aberto usada pelos clientes para executar o processamento de streams em tempo real em fontes de dados de alto throughput. Antes do lançamento de hoje, os clientes podiam executar aplicações autogerenciadas do Apache Flink no EKS, mas precisavam instalar e configurar manualmente o Apache Flink, o que exige um entendimento detalhado do software. Com o lançamento de hoje, os clientes só precisam instalar o operador Kubernetes do Flink e usá-lo para enviar trabalhos diretamente ao cluster do EKS, permitindo que o EMR no EKS gerencie o ciclo de vida das aplicações do Apache Flink. Dessa forma, os clientes podem compartilhar recursos entre aplicações e usar um único conjunto de ferramentas do Kubernetes para monitorar e gerenciar centralmente a infraestrutura. Além disso, com esse lançamento, os clientes têm acesso aos principais recursos de acessibilidade e monitoramento, como o lançamento de aplicações Flink usando jars no Amazon S3, o monitoramento da integração com o Amazon S3 e o Amazon CloudWatch, e a alternância de logs de contêineres.

Para saber mais e começar a usar, acesse a seção do Apache Flink na documentação. O versão de demonstração do Amazon EMR no EKS com Apache Flink já está disponível nas regiões que oferecem o Amazon EMR no EKS.

5 de outubro de 2023 – A versão anterior desta publicação mencionou incorretamente o Apache Flink no Amazon EMR no EKS como uma oferta totalmente gerenciada. Corrigimos esse erro.