Amazon DataZone では、API 主導の OpenLineage 互換のデータリネージビジュアライゼーションのプレビューが導入されました
Amazon DataZone ではデータリネージのプレビューが導入され、お客様が OpenLineage 対応システムまたは API からのリネージイベントを視覚化し、ソースから使用までのデータ移動を追跡できます。Amazon DataZone は、ガバナンスとアクセス制御により、組織の枠を越えてお客様がデータを大規模にカタログ化、発見、共有、管理するデータ管理サービスです。
Amazon DataZone のデータリネージ機能は、データ資産と列の変換をキャプチャして視覚化し、ソースから使用までのデータ移動を把握できます。Amazon DataZone の OpenLineage 互換 API を使用すると、ドメイン管理者とデータプロデューサーは、Amazon DataZone で利用できる範囲を超えるリネージイベント (Amazon S3、AWS Glue、その他のサービスでの変換を含む) をキャプチャして保存できます。Amazon DataZone のデータコンシューマーは、そのリネージを包括的に把握することで資産の出所を信頼することが可能になり、データプロデューサーは使用状況を把握することで資産への変更の影響を評価できます。さらに、Amazon DataZone はイベントごとにリネージをバージョン管理するため、ユーザーは任意の時点のリネージを視覚化したり、資産やジョブの履歴全体の変化を比較したりできます。このリネージ履歴により、データがどのように進化してきたかをより深く理解することができ、データ資産の整合性のトラブルシューティング、監査、および検証に不可欠です。
Amazon DataZone データリネージのプレビューを、Amazon DataZone が利用可能なすべての AWS リージョンで利用できます。
詳細については、Amazon DataZone にアクセスして AWS ニュースブログを読み、データリネージのドキュメントから作業を始めます。