Publié le: May 11, 2021
À partir d'aujourd'hui, Amazon EMR on Amazon EKS est désormais disponible dans la région EU (Paris et Stockholm).
Amazon EMR on EKS permet aux clients d'automatiser le provisionnement et la gestion des frameworks de Big Data open source sur Amazon EKS. Grâce à EMR on EKS, les clients peuvent désormais exécuter des applications Spark aux côtés d'autres types d'applications sur le même cluster EKS, afin d'améliorer l'utilisation des ressources et de simplifier la gestion de l'infrastructure. Les clients peuvent déployer des applications EMR sur le même cluster EKS que d'autres types d'applications, ce qui leur permet de partager des ressources et de standardiser sur une seule solution l'exécution et la gestion de toutes leurs applications. Sur EKS, les clients ont accès aux mêmes fonctionnalités EMR que celles qu'ils utilisent actuellement sur Amazon EC2, notamment l'accès à la nouvelle exécution Spark optimisée pour les performances, EMR Studio (version préliminaire) pour le développement d'applications et une IU Spark persistante pour le débogage.
Pour démarrer, enregistrez votre cluster EKS sur Amazon EMR. Définissez ensuite votre tâche en incluant la version d'EMR, les paramètres Spark et les dépendances de l'application. Amazon EMR on Amazon EKS programme les pods, les conteneurs et les ressources sur votre cluster Amazon EKS. Vous pouvez configurez votre tâche pour qu'elle s'exécute sur des instances Amazon EC2 ou sur Amazon Fargate si vous souhaitez une expérience sans serveur. Vous pouvez créer des flux de travail avec Amazon Managed Workflows for Apache Airflow, puis analyser les sorties grâce aux journaux de tâche stockés dans Amazon S3 ou Amazon CloudWatch.
Pour en savoir plus sur Amazon on EKS, veuillez consulter notre blog Amazon on EKS Launch, notre documentation Amazon EMR on EKS ou consultez notre exposé de présentation technique d'Amazon EMR on EKS.