Veröffentlicht am: Feb 13, 2024
Heute kündigte Amazon EMR auf EC2 eine Erweiterung der APIs DescribeStep und ListStep an, mit der Kunden bis zu 10.000 abgeschlossene Schritte der letzten 7 Tage einsehen können — eine Erhöhung von 1.000 im Vergleich zum bisherigen Limit. Der Service unterstützt auch weiterhin das Abrufen von 1.000 Schritten aus den letzten zwei Monaten. Die API-Optimierungen liefern einen umfassenderen Überblick über die abgeschlossenen Schritte und erleichtern Ihnen das Überwachen und Verwalten der Workflow-Schritte.
Amazon EMR ist eine Cloud-basierte Big-Data-Plattform für Datenverarbeitung, interaktive Analyse und Machine Learning unter Verwendung von Open-Source-Frameworks wie Apache Spark, Presto und Trino und Apache Flink. Diese Optimierung vereinfacht das Erlebnis für Kunden durch eine größere Zahl von Schritten mit kurzer Laufzeit, indem sie eine optimierte Möglichkeit bietet, den Status ihrer Schritte zu überprüfen und abzugleichen, um eine ordnungsgemäße Ausführung der Schritte sicherzustellen und das Debugging zu unterstützen. Wenn der Cluster innerhalb eines Zeitraums von 7 Tagen mehr als 10.000 Schritte empfängt, werden inaktive, vom Benutzer übermittelte Schritte mit dem Status ABGESCHLOSSEN, STORNIERT oder FEHLGESCHLAGEN in chronologischer Reihenfolge entfernt, beginnend mit den ältesten.
Diese Optimierung wird für alle unterstützten EMR-Versionen angeboten und ist in allen AWS-Regionen verfügbar, in denen auch AWS EMR verfügbar ist. Es sind keine weiteren Maßnahmen Ihrerseits erforderlich. Weitere Informationen für das Anzeigen von Schritten finden Sie unter Schritte anzeigen und der Dokumentation zu API DescribeStep.