Veröffentlicht am: Apr 1, 2024
Wir freuen uns, Ihnen ein neues Feature für Amazon EMR auf EC2 vorstellen zu dürfen, das den automatischen, ordnungsgemäßen Austausch fehlerhafter Core-Knoten ermöglicht, um einen weiterhin optimalen Clusterbetrieb zu gewährleisten und Datenverlust zu vermeiden. Zusätzlich veröffentlicht EMR auf EC2 CloudWatch-Ereignisse, um Einblicke in den Zustand der Knoten und die Wiederherstellungsmaßnahmen zu geben. Diese Verbesserungen sind für alle Amazon EMR-Versionen verfügbar.
Mit EMR auf EC2 können Sie Ihre Datenverarbeitungs-Cluster einfach bereitstellen und skalieren, ohne die Infrastruktur-Services zur Datenverarbeitung oder die Einrichtung von Open-Source-Anwendungen verwalten zu müssen. Unter bestimmten Umständen kann es jedoch vorkommen, dass ein EMR-Knoten wegen eines Problems mit der zugrunde liegenden Hardware oder aufgrund einer Speicherüberlastung fehlerhaft ist. In Clustern mit Terminierungsschutz blieben die fehlerhaften Core-Knoten bisher inaktiv und wurden weiterhin auf die Clusterkapazität angerechnet. Für andere Cluster war der ordnungsgemäße Austausch der Core-Knoten nicht möglich. Mit der heutigen Markteinführung minimiert Amazon EMR Arbeitsunterbrechungen und vermeidet Datenverluste, indem es fehlerhafte Core-Knoten ungeachtet der Einstellungen des Terminierungsschutzes Ihres Clusters ordnungsgemäß abschaltet und ersetzt. Amazon EMR veröffentlicht außerdem Ereignisse über den Austausch fehlerhafter Knoten. Diese Ereignisse stehen dann in der EMR-Konsole und in Amazon EventBridge zur Verfügung.
Der ordnungsgemäße Austausch fehlerhafter Core-Knoten ist in allen AWS-Regionen allgemein verfügbar, in denen Amazon EMR auf EC2 verfügbar ist.
Um zu gewährleisten, dass diese Markteinführung sich nicht auf Ihre bestehenden Workflows auswirkt, deaktivieren wir den Austausch fehlerhafter Knoten für Cluster, auf denen EMR 7.0.0 ausgeführt wird und für niedrigere Versionen, für die der Terminierungsschutz aktiviert ist. Für alle anderen Cluster ist dieses Feature standardmäßig aktiviert. Weitere Informationen finden Sie unter Austausch von fehlerhaften Knoten.