AWS Glue が AWS GovCloud (米国) リージョンでリモート Apache Iceberg カタログのカタログフェデレーションに対応
AWS Glue は、AWS GovCloud (米国) リージョンにおいて、リモートの Iceberg REST カタログとのカタログフェデレーションをサポートしました。この機能により、Amazon S3 に保存され、リモートカタログに登録されている Iceberg テーブルに対して、AWS の分析エンジンを使用して直接かつ安全にアクセスできるようになります。
カタログフェデレーションを使用すると、テーブルを移動またはコピーすることなく、任意の AWS 分析エンジンを使用してリモートカタログ内の Iceberg テーブルに連携できます。データチームが Iceberg テーブルにクエリを実行する際、AWS Glue データカタログとリモートカタログの間でメタデータがリアルタイムに同期されるため、クエリ結果は常に最新のメタデータに基づいたものになります。データの検出やクエリ時の一貫したセキュリティコントロールを維持しながら、お好みの AWS 分析エンジンを使用してリモートの Iceberg テーブルを分析する際に、ワークロードに最適なコストパフォーマンスを選択できるようになりました。カタログフェデレーションは、Amazon Redshift、Amazon EMR、Amazon Athena、AWS Glue、および Apache Spark などのサードパーティエンジンを含む、幅広い分析エンジンでサポートされています。
カタログフェデレーションはアクセスコントロールに AWS Lake Formation を使用するため、リモートカタログテーブルを他のデータコンシューマーと共有する際に、きめ細かなアクセスコントロール、クロスアカウント共有、信頼できる ID の伝播を使用できます。カタログフェデレーションは、Iceberg REST 仕様をサポートするカタログ実装と統合されます。
カタログフェデレーションは、Lake Formation コンソールと AWS Glue と Lake Formation の SDK と API を使用して利用できます。この機能は、AWS GovCloud (米国東部) および AWS GovCloud (米国西部) のリージョンで一般提供されています。詳細については、ドキュメントをご覧ください。