Publié le: Feb 13, 2024
Amazon EMR sur EC2 a annoncé aujourd'hui une amélioration des API DescribeStep et ListStep afin de permettre aux clients de visualiser jusqu'à 10 000 étapes terminées au cours des 7 derniers jours, soit une augmentation par rapport à la limite précédente de 1 000 étapes. Le service continuera également à prendre en charge la récupération de 1 000 étapes effectuées au cours des deux derniers mois. Ces améliorations de l'API offrent une meilleure visibilité des étapes terminées et vous permettent de surveiller et de gérer plus facilement votre flux de travail relatif aux étapes.
Amazon EMR est une plateforme cloud de big data pour le traitement des données, l'analyse interactive et le machine learning utilisant des frameworks open source tels qu'Apache Spark, Presto et Trino, et Apache Flink. Cette amélioration simplifie l'expérience des clients ayant un plus grand nombre d'étapes courtes en cours d'exécution en fournissant un moyen rationalisé de vérifier et de réconcilier l'état de leurs étapes afin de garantir une exécution correcte des étapes et de faciliter le débogage. Si le cluster reçoit plus de 10 000 étapes sur une période de 7 jours, les étapes inactives soumises par l'utilisateur et présentant l'état TERMINÉ, ANNULÉ ou ÉCHOUÉ seront supprimées dans l'ordre chronologique, en commençant par les plus anciennes.
Cette amélioration est prise en charge sur toutes les versions d'EMR et est disponible dans toutes les régions AWS où Amazon EMR est disponible. Aucune autre action n'est nécessaire de leur part. Pour en savoir plus sur les étapes de visualisation, consultez la documentation relative aux étapes de visualisation et à la documentation de l'API DescribeStep.