投稿日: Feb 13, 2024
本日、EC2 での Amazon EMR は、DescribeStep および ListStep API の拡張を発表しました。これにより、お客様は過去 7 日間に完了したステップを最大 10,000 件まで表示できるようになりました。これは、以前の上限である 1,000 ステップから増加したものです。このサービスでは、過去 2 か月間の 1,000 ステップの取得も引き続きサポートします。これらの API の改善により、完了したステップの可視性が向上し、ステップワークフローの監視と管理が容易になります。
Amazon EMR は、Apache Spark、Presto と Trino、Apache Flink などのオープンソースフレームワークを使用して、データ処理、インタラクティブ分析、機械学習を行うための、クラウドビッグデータプラットフォームです。 この改善により、ステップのステータスの確認および調整方法が合理化され、ステップが適切に実行されるようになり、デバッグが容易になるため、実行時間が短いステップの数が多いお客様のエクスペリエンスが簡素化されます。クラスターが 7 日以内に受け取ったステップが 10,000 を超える場合、ユーザーが送信した COMPLETED、CANCELLED、または FAILED 状態の非アクティブなステップは、古いものから順に削除されます。
今回の改善はすべての EMR リリースに対応しており、Amazon EMR を提供中のあらゆる AWS リージョンで活用できます。お客様側での対応は特に必要ありません。ステップの表示に関する詳細については、「ステップの表示」およびAPI DescribeStepのドキュメントをご覧ください。