Publicado en: Apr 20, 2021
Hoy nos complace anunciar la disponibilidad general de EMR Studio, un entorno de desarrollo integrado (IDE) que facilita a los científicos e ingenieros de datos el desarrollo, la visualización y la depuración de aplicaciones de big data y análisis escritas en R, Python, Scala y PySpark. EMR Studio proporciona blocs de notas de Jupyter completamente administrados y herramientas como la interfaz de usuario de Spark y YARN Timeline Server para simplificar la depuración. EMR Studio utiliza AWS Single Sign-On y le permite acceder directamente con sus credenciales corporativas sin necesidad de entrar en la consola de AWS.
Mediante EMR Studio, como administrador, puede crear y configurar estudios de EMR desde la consola de EMR, o bien automatizar la creación de estudios si especifica las configuraciones y dependencias en una plantilla de CloudFormation. Puede utilizar la consola de AWS SSO para habilitar AWS SSO, elegir entre diferentes proveedores de identidad compatibles, como Okta, Azure AD, OneLogin, Ping Identity y Microsoft AD, y utilizar la consola de EMR para asignar usuarios y grupos a EMR Studio.
EMR Studio brinda ejemplos de bloc de notas, como código de PySpark que realiza consultas al metaalmacén de Hive, código de Python para la visualización, etc., para ayudarlo a comenzar a desarrollar rápidamente sus aplicaciones de ciencia de datos. Puede conectar blocs de notas a repositorios de GitHub, Bitbucket, GitLab y AWS CodeCommit con independencia de los puntos de acceso públicos. Puede ejecutar sus aplicaciones en clústeres de EMR existentes o crear nuevos clústeres mediante una plantilla de CloudFormation predefinida y transferir los parámetros personalizados a EMR Studio. Puede lanzar la interfaz de usuario de Spark en vivo directamente desde blocs de notas para acceder a registros y depurar la aplicación.
EMR Studio está disponible de manera general en la versión 5.32 y 6.2 de EMR y posterior, y está disponible en las regiones: EE. UU. Este (Ohio, Norte de Virginia), EE. UU. Oeste (Oregón), UE (Irlanda, Fráncfort y Londres) y Asia-Pacífico (Mumbai, Seúl, Singapur, Sídney y Tokio).
Para comenzar con EMR Studio, consulte la documentación de Amazon EMR.