Amazon EMR on EC2 で、インテリジェントなサブネット選択によりクラスターの起動エクスペリエンスが向上
本日より、Amazon EMR on EC2 では、サブネット選択を強化することで、インスタンスフリートクラスターの信頼性とクラスターの起動エクスペリエンスが向上しました。この機能により、EMR on EC2 は IP アドレス不足によるクラスター起動の失敗を減らします。
Amazon EMR は、Apache Spark、Apache Hive、Presto などのオープンソースフレームワークを使用して、データ処理、インタラクティブ分析、機械学習を行うための、クラウドビッグデータプラットフォームです。以前は、EMR クラスターのサブネット選択では、コアインスタンスフリートで使用可能な IP アドレスのみが考慮されていました。Amazon EMR ではクラスターの起動時のサブネットフィルタリングを採用し、すべてのインスタンスフリートを正常に起動するのに十分な利用可能な IP アドレスを持つサブネットの 1 つを選択するようになりました。EMR は、クラスター全体を起動するのに十分な IP アドレスを持つサブネットを見つけられない場合、少なくともコアインスタンスフリートとプライマリインスタンスフリートを起動できるサブネットを優先します。このシナリオでは、EMR は CloudWatch 警告イベントも発行してユーザーに通知します。設定されたサブネットのいずれもコアフリートとプライマリフリートのプロビジョニングに使用できない場合、EMR はクラスターの起動に失敗し、重大なエラーイベントが発生します。これらの CloudWatch イベントにより、クラスターをモニタリングし、必要に応じて修正アクションを実行できます。
お客様は、割り当て戦略を使用して EMR インスタンスフリートクラスターを起動する場合、すべての EMR 5.12.1 以降のリリースでこの機能を利用できます。お客様側での対応は特に必要ありません。この機能は、Amazon EMR on EC2 が利用可能な、AWS GovCloud (米国) リージョンを含む、すべての AWS リージョンで一般提供されています。詳細については、こちらのドキュメントを参照してください。