Publié le: Apr 20, 2021
Aujourd'hui, nous sommes heureux de vous annoncer la disponibilité générale d'EMR Studio un environnement de développement intégré (IDE) qui permet aux scientifiques des données et aux ingénieurs de données de développer, visualiser et déboguer des applications de Big Data et d'analyse écrites en R, Python, Scala et PySpark. EMR Studio fournit des blocs-notes Jupyter entièrement gérés et des outils tels que Spark UI et YARN Timeline Service pour simplifier le débogage. EMR Studio utilise AWS Single Sign-On et vous permet de vous connecter directement avec vos informations d'identification d'entreprise sans vous connecter à la console AWS.
Avec EMR Studio, en tant qu'administrateur, vous pouvez créer et configurer des studios EMR à partir de la console EMR, ou automatiser la création de Studio en spécifiant les configurations et les dépendances dans un modèle CloudFormation. Vous pouvez utiliser la console AWS SSO pour activer AWS SSO, choisir entre les fournisseurs d'identités pris en charge tels que Okta, Azure AD, OneLogin, Ping Identity et Microsoft AD, et utiliser la console EMR pour affecter des utilisateurs et des groupes à EMR Studio.
EMR Studio fournit des exemples de blocs-notes, tels que notamment le code PySpark interrogeant le metastore Hive et le code Python à des fins de visualisation, pour vous aider à démarrer rapidement le développement de vos applications de science des données. Vous pouvez connecter des blocs-notes à des référentiels GitHub, Bitbucket, GitLab et AWS CodeCommit, quels que soient les points d'accès publics. Vous pouvez exécuter vos applications sur des clusters EMR existants ou créer des clusters en utilisant un modèle CloudFormation prédéfini et en passant des paramètres personnalisés dans EMR Studio. Vous pouvez lancer l'interface utilisateur Spark en direct directement à partir de blocs-notes pour accéder aux journaux et déboguer l'application.
EMR Studio est disponible pour tous sur EMR versions 5.32 et 6.2 (et versions ultérieures), dans les régions USA Est (Ohio, Virginie du Nord), USA Ouest (Oregon), Europe (Irlande, Francfort et Londres) et Asie-Pacifique (Mumbai, Séoul, Singapour, Sydney et Tokyo).
Pour faire votre premiers pas avec EMR Studio, consultez notre documentation Amazon EMR Studio.