Publié le: Dec 9, 2020
Aujourd’hui, nous annonçons la version préliminaire publique d’EMR Studio un environnement de développement intégré (IDE) qui permet aux scientifiques des données et aux ingénieurs de données de développer, visualiser et déboguer des applications d'ingénierie et de science des données écrites en R, Python, Scala et PySpark. EMR Studio fournit des blocs-notes Jupyter entièrement gérés et des outils tels que Spark UI et YARN Timeline Service pour simplifier le débogage.
EMR Studio utilise AWS SSO et vous permet de vous connecter directement avec vos informations d'identification d'entreprise sans vous connecter à la console AWS. Les scientifiques des données et les analystes peuvent installer des noyaux et des bibliothèques personnalisés, collaborer avec des pairs à l'aide de référentiels de code tels que GitHub et BitBucket, ou exécuter des blocs-notes paramétrés dans le cadre de flux de travail planifiés à l'aide de services d'orchestration comme Apache Airflow ou Amazon Managed Workflows for Apache Airflow.
Les noyaux et applications EMR Studio s'exécutent dans des clusters EMR, de sorte que vous bénéficiez du traitement de données distribué en utilisant l’environnement d’exécution Amazon EMR for Apache Spark aux performances optimisées. Les administrateurs peuvent configurer EMR Studio pour que les analystes puissent exécuter leurs applications dans les clusters EMR existants ou créer des clusters à l'aide de modèles AWS CloudFormation prédéfinis pour EMR. Dans EMR Studio, vous pouvez parcourir tous les clusters EMR dans un emplacement central et affiner à l'aide de filtres par ID de cluster, état de cluster et d'autres paramètres. En un simple clic, vous pouvez accéder au Spark History Server, au YARN Timeline Server ou à l’IU Tez qui superposent le contexte d'exécution sur les tâches dans les clusters actifs et arrêtés.
EMR Studio est disponible sur EMR version 6.2 et ultérieure, dans les régions USA Est (Virginie du Nord), USA Ouest (Oregon) et UE (Irlande) pour la version préliminaire publique.
Pour démarrer avec la version préliminaire publique EMR Studio, consultez la page des informations sur le produit.