Publicado: Jul 14, 2023
Temos o prazer de anunciar que o Amazon EMR no EKS já oferece suporte à execução programática de cadernos Jupyter em workloads interativas por meio de endpoints gerenciados. O Amazon EMR no EKS permite aos clientes executar estruturas de big data de código aberto, como o Apache Spark, no Amazon EKS. Os clientes do Amazon EMR no EKS podem configurar e utilizar um endpoint gerenciado (disponível para demonstração) para executar workloads interativas utilizando ambientes de desenvolvimento integrados (IDEs) como o EMR Studio.
Atualmente, os clientes utilizam cadernos Jupyter no Amazon EMR no EKS usando endpoints gerenciados com a conveniência dos espaços de trabalho do EMR Studio por meio de uma interface baseada na web. Com a execução programática de endpoints gerenciados do EMR no EKS, os engenheiros de dados já têm a flexibilidade adicional de executar cadernos Jupyter usando scripts, encadear vários cadernos ou usar serviços de orquestração, como AWS Step Functions ou Apache Airflow, para criar pipelines e executar workloads interativas.
Para saber mais sobre esse recurso, consulte a documentação sobre execução programática. A execução programática de endpoints gerenciados tem suporte no Amazon EMR no EKS versão 6.10 e superior e está disponível em todas as regiões nas quais o Amazon EMR no EKS é oferecido atualmente.