投稿日: May 26, 2021

Amazon EMR 6.3 リリースバージョンは Apache Spark 3.1.1 をサポートするようになりました。これにより、EMR Runtime for Spark でランタイムパフォーマンスが向上します。

Amazon EMR 6.3 は、Apache Hudi 0.7.0、Flink 1.12.1、PrestoDB 0.245.1、PrestoSQL 350、Hue 4.9、JupyterHub 1.2、Oozie 5.2.1、TensorFlow 2.4.1 もサポートしています。

Amazon EMR 6.3 以降、Amazon EMR on EKS は Kubernetes Pod Templates をサポートするようになりました。これにより、Spark ワークロードの実行を簡素化してコストを管理できるようになりました。詳細については、ドキュメントを参照してください。

Amazon EMR 6.3 を使用すると、Apache Ranger とネイティブに統合するクラスターを起動できます。Amazon EMR 管理ガイドの Amazon EMR を Apache Ranger と統合するを参照してください。

AWS のベストプラクティスに準拠するために、Amazon EMR は、非推奨となる予定のポリシーに代えて、v2 EMR スコープのデフォルトのマネージドポリシーを導入しました。Amazon EMR マネージドポリシーを参照してください。

Amazon EMR 6.2 以降、Amazon EMR での Apache Hbase は、Amazon S3 での HBase でのパフォーマンスを向上させるために、永続的な Hfile トラッキングを追加しました。詳細については、ブログをお読みください。

Amazon EMR 5.31 以降、Amazon EMR には、カスタムパフォーマンスの改善を含む Presto のパフォーマンス最適化ランタイム環境である Presto の EMR ランタイムが含まれるようになりました。Presto の EMR ランタイムを使用すると、クエリは最大 2.6 倍高速に実行されます。詳細については、ブログをご覧ください。

EMR 6.3 は、Amazon EMR が提供されているすべての商用リージョンで一般利用が可能です。詳細については、Amazon EMR のリージョンごとの利用可否リリースノートを参照してください。