Veröffentlicht am: Aug 2, 2018
Sie können nun Apache Flink 1.5.0 und Apache Livy 0.5.0 in der Amazon EMR-Version 5.16.0 verwenden. Flink 1.5.0 hat mehrere neue Funktionen. Darunter ein neues Bereitstellungsmodell, das die dynamische Ressourcenzuweisung auf YARN für eine effiziente Ressourcennutzung unterstützt, Support für einen Broadcast-Status, der die Replikation von Konfigurationsregeln und -mustern auf alle parallelen Instanzen einer Funktion ermöglicht, einen neuen SQL CLI-Client zur Ausführung von Ad-hoc-Abfragen auf Datenströmen, die Möglichkeit, Statusinformationen auf lokalen Festplatten für eine schnellere und effizientere Fehlerbehebung zu speichern, sowie andere Performance- und Durchsatz-Updates für Streaming-Leistungen. Livy 0.5.0 bietet Unterstützung für den SparkSQL-Interpreter zur Ausführung interaktiver SQL-Abfragen, die Möglichkeit, mehrere Sprachen zu verwenden und den SparkContext in einer einzigen Sitzung gemeinsam zu nutzen, die Möglichkeit, Variablen über mehrere Jobs hinweg zu verwenden, sowie weitere Verbesserungen. Zusätzlich können Sie jetzt die aktualisierte Version von Apache Hadoop 2.8.4, Apache Spark 2.3.1, Presto 0.203, Apache Phoenix 4.14.0 und Apache MXNet 1.2.0 verwenden.
Sie können einen Amazon EMR-Cluster mit der Version 5.16.0 erstellen, indem Sie in der AWS-Management-Konsole, AWS CLI oder SDK die Versionsbezeichnung „emr-5.16.0“ auswählen. Sie können Flink, Livy, Hadoop, Spark, Presto, Phoenix und MXNet wählen, um diese Anwendungen zu installieren, wenn Sie Ihren EMR-Cluster starten. Weitere Informationen zur EMR-Version 5.16.0, Flink 1.5.0, Livy 0.5.0, Spark 2.3.1, Presto 0.203, Hadoop 2.8.4, Phoenix 4.14.0 und MXNet 1.2.0 finden Sie in der Amazon EMR-Dokumentation.
Die Amazon EMR-Version 5.16.0 ist jetzt in allen unterstützten Regionen für Amazon EMR verfügbar.
Wir haben einen RSS-Feed für die EMR-Versionshinweise hinzugefügt. Der Feed enthält eine kurze Zusammenfassung wichtiger Updates und einen Link zu den detaillierten Versionshinweisen. Verwenden Sie das RSS-Symbol oben in der Anleitung zur EMR-Version um die Feed-URL direkt mit Ihrem bevorzugten Feed-Reader zu verknüpfen (http://docs.aws.amazon.com/emr/latest/ReleaseGuide/amazon-emr-release-notes.rss)