Veröffentlicht am: Oct 14, 2021
Die Release-Version von Amazon EMR 6.4 unterstützt jetzt Apache Spark 3.1.2 und bietet mit Amazon EMR Runtime for Apache Spark Verbesserungen der Laufzeitleistung. Amazon EMR 6.4 bietet Verbesserungen der Presto-Laufzeit für PrestoDB 0.254, und Verbesserungen der Laufzeit für Apache Hive 3.1.2, wenn Sie AWS Glue-Datenkatalog für Ihren Metastore verwenden.
Amazon EMR 6.4 unterstützt Apache Hudi 0.8.0, Trino 359, PrestoDB 0.254, Apache HBase 2.4.4, Apache Phoenix 5.1.2, Apache Flink 1.13.1, Apache Livy 0.7.1, JupyterHub 1.4.1, Apache Zookeeper 3.5.7 und Apache MXNet 1.8.0. In unserem Release-Leitfaden finden Sie weitere Informationen.
Ab Amazon EMR Release-Versionen 5.30 und 6.1 können Sie nun automatisch inaktive Amazon EMR Cluster beenden. So können Sie Kosten minimieren, ohne Cluster-Aktivität zu überwachen. Informationen zu den ersten Schritten finden Sie hier in unserer Dokumentation.
Amazon EMR Studio unterstützt jetzt mehrere Sprachen in den gleichen Jupyter-basierten Notebooks für Spark-Workloads. Weitere Details finden Sie in unserer Dokumentation. Sie können Amazon EMR Studio-Benutzer jetzt zusätzlich zu AWS Single Sign-On auch mit IAM-basierter Authentifizierung oder IAM Federation authentifizieren. Weitere Informationen finden Sie hier.
Amazon EMR 6.4 umfasst Hudi 0.8.0, mit dem Sie mehrere Anwendungen verwenden können, um gleichzeitig in dieselbe Hudi-Tabelle zu schreiben. Hier finden Sie weitere Informationen zu Hudi 0.8.0 Funktionen. Sie können jetzt Berichte von Hudi-Metriken zur Amazon CloudWatch senden, und Hudi-Konfigurationen auf Cluster-Ebene mithilfe der EMR-Konfigurations-API und der Rekonfigurations-Funktion senden.
Amazon EMR 6.4 unterstützt jetzt Spark SQL zum Schreiben und Aktualisieren von Apache Hive Metadaten auf Apache Ranger-aktivierten Amazon EMR-Clustern. Weitere Details finden Sie in unserer Dokumentation.
Ab Release-Versionen 5.7 von Amazon EMR können Sie Cluster mit mehreren Amazon Machine Images (AMIs) erstellen. Sie können AWS Graviton- und nicht-AWS Graviton-Instances im selben Cluster beinhalten. Weitere Informationen finden Sie in unserer Dokumentation. Amazon EMR 6.4 ist allgemein in allen Regionen verfügbar, in denen Amazon EMR verfügbar ist. Weitere Informationen finden Sie unter Regionale Verfügbarkeit von Amazon EMR und in unseren Versionshinweisen.