Publicado: Dec 9, 2020
Hoje estamos anunciando a visualização pública do EMR Studio, um ambiente de desenvolvimento integrado (IDE) que facilita para os cientistas e engenheiros de dados desenvolver, visualizar e depurar aplicativos de engenharia de dados e ciência de dados escritas em R, Python, Scala e PySpark. O EMR Studio oferece Notebooks Jupyter totalmente gerenciados e ferramentas como Spark UI e YARN Timeline Service para simplificar a depuração.
O EMR Studio utiliza a AWS SSO e permite fazer o login diretamente com suas credenciais corporativas sem precisar fazer o login no Console AWS. Cientistas e analistas de dados podem instalar kernels e bibliotecas personalizadas, colaborar com colegas usando repositórios de código como GitHub e BitBucket ou executar blocos de anotações parametrizados como parte de fluxos de trabalho programados usando serviços de orquestração como Apache Airflow ou Amazon Managed Workflows para Apache Airflow.
Os kernels e aplicativos do EMR Studio são executados em clusters EMR, de forma que você obtenha o benefício do processamento distribuído de dados usando o desempenho otimizado do tempo de execução do Amazon EMR para o Apache Spark. Os administradores podem configurar o EMR Studio para que os analistas possam executar seus aplicativos em clusters EMR existentes ou criar novos clusters usando modelos predefinidos da AWS CloudFormation para EMR. No EMR Studio, navegue por todos os clusters EMR em um local central e restrinja a navegação usando filtros por ID de cluster, estado de cluster e outros parâmetros. Com apenas um clique, você pode acessar o Spark History Server, o YARN Timeline Server ou o Tez UI que sobrepõem o contexto de execução em trabalhos tanto em clusters ativos quanto em clusters encerrados.
O EMR Studio está disponível na versão 6.2 do EMR e versões mais recentes nas regiões do Leste dos EUA (Norte da Virgínia), Oeste dos EUA (Oregon) e UE (Irlanda) para visualização pública.
Para começar com a visualização pública do EMR Studio, veja a Página de Detalhes do Produto.