投稿日: Dec 7, 2021
AWS Glue ストリーミングの抽出、変換、ロード (ETL) ジョブを、AWS Glue スキーマレジストリを使用して作成された AWS Glue データカタログテーブルから読み取ることができるようになりました。AWS Glue のストリーミング ETL を使用すると、ストリーミングデータをオンザフライで準備し、数秒で分析できるようにする継続的取り込みパイプラインをセットアップできます。AWS Glue スキーマレジストリを使用すると、データストリームスキーマを一元的に検出、制御、展開させることができます。今回の統合により、ジョブのセットアッププロセスが合理化され、スキーマの適用が簡素化されます。
この機能を使用すると、IoT イベントストリーム、クリックストリーム、ネットワークログなどのストリーミングイベントデータのスキーマを管理および適用し、ストリームを処理する ETL ジョブをすばやく設定できます。実行中のデータストリームをクリーンアップして変換し、分析のために結果をデータストアに継続的にロードできます。
この機能は、AWS Glue と同じ AWS リージョンでご利用いただけます。
詳細については、ドキュメントを参照してください。