投稿日: Jul 19, 2022
AWS Glue ストリーミング ETL のオートスケーリングが一般利用できるようになりました。AWS Glue ストリーミング ETL ジョブでは、入力ストリームに基づいてリソースを動的にスケールアップおよびスケールダウンできるようになりました。オートスケーリングでストリーミング ETL ジョブに必要となる適切なリソースを割り当てることにより、リソースの最適化に必要なコストと手作業を削減するのに役立ちます。
AWS Glue ストリーミング ETL ジョブはストリーミングソースからのデータを継続的に消費し、処理中のデータをクリーンアップして変換し、数秒で分析できるようにします。AWS Glue オートスケーリングはジョブ実行の各段階をモニタリングし、アイドル状態のときにワーカーをオフにしたり、追加の並列処理が可能な場合はワーカーを追加したりします。これにより、リソースの最適化に必要なストリーミングジョブのコストと手作業を削減できます。詳細については、ドキュメントを参照してください。