Veröffentlicht am: Jun 23, 2023
AWS Glue bietet jetzt eine Datenvorschau für Streaming-Jobs in Glue Studio, die Data Engineers bei der Beschleunigung der Entwicklung von Streaming-ETL-Jobs unterstützt.
Glue-Streaming-ETL-Jobs stellen eine Verbindung zu Streaming-Datenquellen wie Amazon Kinesis und Amazon MSK her, um die Daten während der Übertragung aufzunehmen, zu bereinigen, umzuwandeln und zu laden und sie in Sekundenschnelle für die Analyse bereitzustellen. Data Engineers können Glue Studio verwenden, um Pipelines für Streaming-Daten zu erstellen und zu testen. Glue Studio bietet Glue Data Preview – ein Feature der visuellen ETL-Authoring-Schnittstelle, mit dem der Benutzer die Ausgabevorschau seiner Daten bei jedem Schritt sehen kann. AWS Glue Studio ermöglicht Ihnen jetzt eine Vorschau Ihrer Streaming-Daten bei jedem Schritt des visuellen Auftragserstellungsprozesses. AWS Glue Studio tastet automatisch Ihre Daten ab und führt dann jede Transformation in Ihrem Job aus, damit Sie Ihre Pipeline für Streaming-Daten testen und debuggen können, ohne den Job speichern oder ausführen zu müssen. Diese Funktion ist in denselben Regionen verfügbar wie AWS Glue. Weitere Informationen finden Sie in unserer Dokumentation und auf der AWS-Glue-Preisseite.