Amazon DataZone veröffentlicht eine API-gesteuerte, OpenLineage-kompatible Data-Lineage-Visualisierung in der Vorschauversion
Amazon DataZone veröffentlicht Data Lineage in der Vorschauversion und unterstützt Kunden dabei, Verzweigungsereignisse von OpenLineage-fähigen Systemen oder über API zu visualisieren und die Datenbewegung von der Quelle bis zum Verbrauch nachzuverfolgen. Amazon DataZone ist ein Datenmanagement-Service für Kunden zum Katalogisieren, Entdecken, Teilen und Verwalten von Daten in großem Umfang über Unternehmensgrenzen hinweg mit Governance- und Zugriffskontrollen.
Das Feature „Data Lineage von Amazon DataZone erfasst und visualisiert die Transformationen von Daten-Assets und -spalten und verschafft einen Einblick in die Datenbewegungen von der Quelle bis zur Nutzung. Domain-Administratoren und Datenproduzenten können über die OpenLineage-kompatible API von Amazon DataZone Verzweigungsereignisse erfassen und speichern, die über das hinausgehen, was in Amazon DataZone verfügbar ist. Dazu gehören auch die Transformationen in Amazon S3, AWS Glue und anderen Services. Datenverbraucher in Amazon DataZone erhalten so einen ganzheitlichen Überblick, der ihnen in Bezug auf die Verzweigung des Assets Sicherheit gibt. Datenproduzenten können hingegen die Auswirkungen von Änderungen auf ein Asset bewerten, indem sie dessen Verbrauch verstehen. Darüber hinaus versioniert Amazon DataZone die Verzweigung mit jedem Ereignis, sodass Benutzer die Verzweigung zu jedem Zeitpunkt visualisieren oder Transformationen in Verlauf eines Assets oder Aufgabe vergleichen können. Dieser Verzweigungsverlauf bietet einen tieferen Einblick darin, wie Daten entstanden sind, was für die Fehlerbehebung, Prüfung und Validierung der Integrität von Daten-Assets unerlässlich ist.
Data Lineage ist als Vorschauversion in Amazon DataZone in allen AWS-Regionen verfügbar, in denen Amazon DataZone verfügbar ist.
Weitere Informationen finden Sie auf Amazon DataZone, im AWS News Blog und erste Schritte in der Dokumentation zu Data Lineage.