投稿日: Mar 24, 2023

マネージドエンドポイントを使用してインタラクティブな Spark ワークロードを実行する際に、Jupyter Enterprise ゲートウェイ (JEG) ポッドをどこにデプロイできるかを定義するサポートを発表できることを嬉しく思います。Amazon EMR on EKS は、Amazon EKS 上で Apache Spark などのオープンソースのビッグデータフレームワークを実行するためのサービスです。Amazon EMR on EKS では、EMR Studio などの統合開発環境 (IDE) を使用してインタラクティブなワークロードを実行するために、マネージドエンドポイント (プレビューで利用可能) を設定して使用することができます。

これまで、マネージドエンドポイント経由で Jupyter notebook を実行していたお客様は、マネージドエンドポイントをデプロイするインスタンスタイプを制御できませんでした。マネージドエンドポイントをスポットインスタンスにデプロイすると、マネージドエンドポイント経由で Jupyter notebook にアクセスできなくなり、お客様が回避しなければならない問題が発生する可能性があります。この機能により、お客様は JEG ポッドのデプロイ先を完全に制御できるようになりました。これには、マネージド型ノードグループまたはセルフマネージド型ノードグループを介してオンデマンドインスタンスを指定する機能も含まれます。

この機能の詳細については、こちらのドキュメントをご覧ください。マネージドエンドポイントの JEG ポッドは、6.10 以降にリリースされた Amazon EMR on EKS でサポートされており、Amazon EMR on EKS を提供中のすべてのリージョンで利用できます。