投稿日: Sep 14, 2023
AWS Glue ストリーミング ETL が Kinesis イベントソースについて Amazon Kinesis Data Streams (KDS) 拡張ファンアウト機能をサポートするようになりました。拡張ファンアウトにより、開発者は各ストリームコンシューマーに独自の読み取りスループットを提供することで、ストリームコンシューマー (ストリームからリアルタイムでデータを読み取るアプリケーション) の数を増やすことができます。
Amazon Kinesis Data Streams (KDS) の拡張ファンアウト機能により、ストリームコンシューマーはシャードあたり 2 MB/秒の読み取りスループットを実現できます。本日より、AWS Glue ストリーミングは拡張ファンアウトモードのサポートを開始します。これにより、効果的なスケーリング、ストリーミング ETL ジョブのパフォーマンスの向上、複数のコンシューマーがストリームをサブスクライブする際に発生する Kinesis スロットリングの問題を軽減できます。