Veröffentlicht am: Jun 7, 2022
Die 6.6-Version von Amazon EMR unterstützt jetzt Apache Spark 3.2, Apache Spark RAPIDS 22.02, CUDA 11, Apache 0.10.1, Apache Iceberg 0.13, Trino 0.367 und PrestoDB 0.267. Sie können die leistungsoptimierte Version von Apache Spark 3.2 auf EMR auf EC2, EKS und dem kürzlich veröffentlichten EMR Serverless verwenden. Darüber hinaus sind Apache Hudi 0.10.1 und Apache Iceberg 0.13 auf EC2, EKS und Serverless verfügbar. Apache Hive 3.1.2 ist auf EMR auf EC2 und EMR Serverless verfügbar. Trino 0.367 und PrestoDB 0.267 sind nur für EMR auf EC2 verfügbar.
Jede Version von Amazon EMR verwendet ein standardmäßiges Amazon Linux 2 (AL2) Amazon Machine Image (AMI) für Amazon EMR. Vor Amazon EMR 6.6 basierte das Standard-AMI auf dem neuesten und aktuellsten Amazon-Linux-AMI, das zum Zeitpunkt der Veröffentlichung von Amazon EMR verfügbar war. Daher war die Version der Amazon EMR-Veröffentlichung an den jeweils zugewiesenen AL2-AMI „gebunden“. Das bedeutet, dass alle neuen Updates für AL2 nicht automatisch aktualisiert wurden, es sei denn, Sie sind auf die nächste Amazon-EMR-Version gewechselt oder haben sie manuell installiert. Mit Amazon EMR 6.6 und nachfolgenden Versionen verwendet Amazon EMR jedes Mal, wenn Sie eine EMR auf einem EC2-Cluster launchen, automatisch die neueste AL2-Version. Besuchen Sie unsere Dokumentation, um mehr zu erfahren.
Ab Amazon EMR 6.6 werden Anwendungen, die Log4j 1.x und Log4j 2.x verwenden, so aktualisiert, dass sie Log4j 1.2.17 (oder höher) bzw. Log4j 2.17.1 (oder höher) verwenden. Für diese Anwendungen ist es auch nicht erforderlich, die oben beschriebenen Bootstrap-Aktionen zu verwenden, um die CVE-Probleme zu mildern.
Darüber hinaus hat sich mit der 6.6-Version von Amazon EMR die Cluster-Startzeit auf EMR auf EC2 um durchschnittlich 80 Sekunden für Cluster verbessert, die die Standard-AMI-Option von Amazon EMR verwenden und gängige Anwendungen wie Apache Hadoop, Apache Spark und Apache Hive installieren.
Amazon EMR Version 6.6 ist allgemein in allen Regionen verfügbar, in denen Amazon EMR verfügbar ist. Weitere Informationen finden Sie unter Regionale Verfügbarkeit von Amazon EMR und in unseren Versionshinweisen.