Amazon Managed Service für Apache Flink veröffentlicht einen neuen Connector von Amazon Kinesis Data Streams

Veröffentlicht am: 22. Nov. 2024

Amazon Managed Service für Apache Flink bietet jetzt einen neuen Apache Flink-Connector für Amazon Kinesis Data Streams. Dieser Open-Source-Connector, der von AWS bereitgestellt wird, unterstützt Apache Flink 2.0 und bietet mehrere Verbesserungen. Dies ermöglicht Lesevorgänge in der richtigen Reihenfolge beim Hoch- oder Herunterskalieren von Streams , unterstützt das native Watermarking von Apache Flink und verbessert die Beobachtbarkeit durch einheitliche Connector-Metriken. Darüber hinaus verwendet Connector AWS SDK für Java 2.x, das verbesserte Leistungs- und Sicherheitsfeatures und eine native Wiederholungsstrategie unterstützt.

Amazon Kinesis Data Streams ist ein Serverless-Streaming-Datenservice, der Kunden das Erfassen, Verarbeiten und Speichern von Datenströmen in jeder Größenordnung ermöglicht. Amazon Managed Service für Apache Flink macht es einfacher Streaming-Daten mit Apache Flink in Echtzeit zu transformieren und zu analysieren, ohne Server oder Cluster verwalten zu müssen. Sie können den neuen Connector verwenden, um Daten aus einer Kinesis-Data-Stream-Quelle für die Echtzeitverarbeitung in Ihrer Apache Flink-Anwendung zu nutzen und Daten auch an ein Kinesis-Data-Streams-Ziel zurückzusenden. Sie können den neuen Connector verwenden, um Daten aus einem Kinesis-Datenstrom zu lesen. Voraussetzung dafür ist mindestens Apache Flink Version 1.19.

Weitere Informationen zum Connector von Amazon Kinesis Data Streams für Apache Flink finden Sie in der offiziellen Dokumentation von Apache Flink. Sie können auch die GitHub-Repositorys auf Apache-AWS-Connectors prüfen.