Amazon EMR Serverless führt die Steuerelemente „parallele Ausführung von Aufträgen“ und „Warteschlange“ ein

Veröffentlicht am: 1. Okt. 2024

Amazon EMR Serverless ist eine Serverless-Option in Amazon EMR, die es Data Engineers und Datenwissenschaftlern einfach macht, Open-Source-Big-Data-Analytik-Frameworks auszuführen, ohne Cluster oder Server konfigurieren, verwalten und skalieren zu müssen. Wir freuen uns, Ihnen heute die Zugriffssteuerung bei Auftragausführung auf Amazon EMR Serverless ankündigen zu können, inklusive Unterstützung für die parallele Ausführung von Aufträgen und Warteschlangenkontrolle.

Die parallele Ausführung von Aufträgen und Warteschlange ermöglichen es Ihnen, die maximale Anzahl an gleichzeitigen Auftragsausführungen für eine Anwendung zu konfigurieren und automatisch alle weiteren gesendeten Auftragsausführungen in die Warteschlange zu stellen. Dies verhindert Ausfälle bei der Auftragsausführung, wenn die API-Limits aufgrund eines Anstiegs der Auftragsausführungen überschritten werden oder wenn Ressourcen erschöpft sind, entweder weil das Limit für die maximale Anzahl gleichzeitiger vCPUs eines Kontos oder einer Anwendung oder das IP-Adresslimit eines zugrunde liegenden Subnetzes überschritten wird. Eine Warteschlange für die Auftragsausführung vereinfacht ebenso die Verwaltung der Auftragsausführung, da keine komplexen Verwaltungssysteme für Warteschlangen eingerichtet werden müssen, um fehlgeschlagene Aufträge zu wiederholen, die aufgrund von Limitfehlern (z. B. maximale Anzahl gleichzeitiger vCPUs, IP-Adresslimits für Subnetze usw.) entstanden sind. Mit dem Feature werden Aufträge automatisch in die Warteschlange gestellt und verarbeitet, sobald Slots parallel zur Verfügung stehen. Dies gewährleistet eine effiziente Auslastung der Ressourcen und verhindert Auftragsausfälle.

Die parallele Ausführung von Amazon-EMR-Serverless-Aufträgen und -warteschlange ist in allen AWS-Regionen verfügbar, in denen AWS EMR Serverless verfügbar ist, einschließlich der Regionen AWS GovCloud (USA) und mit Ausnahme der Regionen China. Weitere Informationen finden Sie in der EMR-Serverless-Dokumentation unter parallele Aufträge und Warteschlange.