Veröffentlicht am: Nov 28, 2022
AWS Glue bietet jetzt benutzerdefinierte visuelle Transformationen, mit denen Kunden geschäftsspezifische ETL-Logik definieren, wiederverwenden und in ihren Teams gemeinsam nutzen können. AWS Glue ist ein skalierbarer Serverless-Datenintegrationsservice, der zum vereinfachten Erkennen, Aufbereiten, Verschieben und Integrieren von Daten aus verschiedenen Quellen verwendet wird. Mit dieser neuen Funktion können Data Engineers wiederverwendbare Transformationen für den visuellen Auftragseditor von AWS Glue schreiben. Wiederverwendbare Transformationen verbessern die Konsistenz zwischen den Teams und tragen dazu bei, dass Aufträge auf dem neuesten Stand bleiben, da Doppelarbeit und doppelter Code vermieden werden.
Mithilfe von Apache-Spark-Code und dem Benutzereingabeformular kannst du benutzerdefinierte visuelle Transformationen für AWS Glue definieren. Du kannst zudem Validierungen für das Eingabeformular festlegen, um Fehler der Benutzer zu vermeiden. Sobald du die Dateien, die die Transformation definieren, in deinem AWS-Konto speicherst, erscheint sie automatisch in der Drop-down-Liste der verfügbaren Transformationen im visuellen Auftragseditor. Sie können benutzerdefinierte visuelle Transformationen sowohl von visuellen als auch von codebasierten Aufträgen aus aufrufen. Außerdem ist die gemeinsame Nutzung von Transformationen zwischen AWS-Konten ganz einfach.
Weitere Informationen finden Sie in der Dokumentation zu AWS Glue oder lesen Sie den Blogbeitrag und sehen Sie sich das Video zum Launch an.
Diese Funktion ist in denselben AWS-Regionen verfügbar wie AWS Glue.