投稿日: Jul 31, 2023
Amazon EMR Serverless はサーバーレスオプションで、データアナリストやエンジニアが、Apache Spark や Apache Hive といったオープンソースのビッグデータ分析フレームワークを簡単に実行できます。その際、クラスターやサーバーを構成、管理、スケーリングする必要はありません。本日より、EMR Serverless API を呼び出して、アプリケーション UI を表示できます。たとえば、実行中のジョブの場合はライブの Spark UI または Tez UI を、完了したジョブの場合は Spark History Server または永続的な Tez UI を表示できます。
Spark または Hive のワークロードは、多くの場合、Apache Airflow や AWS Step Functions などのオーケストレーションツールを使用して送信されます。このようなパイプラインをモニタリングするには、実行中のジョブのライブアプリケーション UI と完了したジョブの永続アプリケーション UI に移動できると便利です。EMR Serverless のアプリケーション UI は EMR Studio UI から使用できますが、API を希望するユーザーは get-dashboard-for-job-run API を使用して安全な URL を取得し、アプリケーション UI を表示できるようになりました。
この機能は、Amazon EMR Serverless を使用できるすべてのリージョンで利用できます。
この機能の詳細については、EMR Serverless のドキュメントと API ドキュメントをご覧ください。