Amazon MSK fügt Unterstützung für Apache Kafka Version 4.1 hinzu
Amazon Managed Streaming für Apache Kafka (Amazon MSK) unterstützt nun Apache Kafka Version 4.1 und führt Queues als Vorschaufunktion, ein neues Streams Rebalance Protocol im Early Access sowie Eligible Leader Replicas (ELR) ein. Apache Kafka Version 4.1 enthält neben diesen Funktionen auch verschiedene Bugfixes und Verbesserungen. Weitere Informationen finden Sie in den Apache Kafka-Versionshinweisen für Version 4.1.
Ein wesentliches Highlight von Kafka 4.1 ist die Einführung von Queues als Vorschaufunktion. Kunden können mehrere Verbraucher verwenden, um Nachrichten aus denselben Themenpartitionen zu verarbeiten, wodurch die Parallelität und der Durchsatz für Workloads verbessert werden, die eine Punkt-zu-Punkt-Nachrichtenübermittlung erfordern. Das neue Streams Rebalance Protocol basiert auf dem Consumer Rebalance Protocol von Kafka 4.0 und erweitert die Broker-Koordinationsfunktionen auf Kafka Streams, um die Aufgabenverteilung und das Rebalancing zu optimieren. Darüber hinaus ist ELR nun standardmäßig aktiviert, um die Verfügbarkeit zu verbessern.
Um mit der Verwendung von Apache Kafka 4.1 auf Amazon MSK zu beginnen, wählen Sie einfach Version 4.1.x aus, wenn Sie einen neuen Cluster über die AWS-Managementkonsole, die AWS-CLI oder die AWS-SDKs erstellen. Sie können auch vorhandene, von MSK bereitgestellte Cluster mit einem direkten fortlaufenden Update aktualisieren. Amazon MSK orchestriert Broker-Neustarts, um die Verfügbarkeit aufrechtzuerhalten und Ihre Daten während des Upgrades zu schützen. Der Support für Kafka Version 4.1 ist heute in allen AWS-Regionen verfügbar, in denen Amazon MSK angeboten wird. Informationen zu den ersten Schritten finden Sie im Amazon-MSK-Entwicklerhandbuch.