Veröffentlicht am: Jul 27, 2023
Wir freuen uns, Ihnen mitteilen zu können, dass Sie ab heute Secrets aus AWS Secrets Manager in Amazon EMR Serverless aus Ihren Spark- und Hive-Aufträgen abrufen können. Amazon EMR Serverless ist eine serverlose Option, mit der Datenanalysten und Techniker ganz einfach Open-Source-Frameworks für Big-Data-Analytik wie Apache Spark und Apache Hive ausführen können, ohne Cluster oder Server konfigurieren, verwalten und skalieren zu müssen.
Spark- oder Hive-Aufträge müssen häufig auf vertrauliche Informationen wie Anmeldeinformationen für Datenbanken und API-Schlüssel zugreifen, um eine Verbindung zu anderen Systemen herzustellen. Es hat sich bewährt, die Verwaltung solch vertraulicher Informationen von der Anwendungskonfiguration zu entkoppeln, um die Wiederverwendbarkeit von Code zu verbessern und den Betriebsaufwand für die Aktualisierung der Anwendungskonfiguration bei der Aktualisierung geheimer Daten zu reduzieren. Jetzt können Sie Verweise auf Secrets, die in Secrets Manager gespeichert sind, als Teil von EMR-Serverless-Auftragskonfigurationen oder -Klassifizierungen sicher angeben. Während der Laufzeit werden diese Verweise durch geheime Werte ersetzt. Dieses Feature ist besonders nützlich bei Anwendungsfällen, bei denen Anmeldeinformationen für externe Hive-Metastore-Datenbanken in der Anwendungskonfiguration angegeben werden müssen.
Dieses Feature ist für alle Release-Versionen von EMR und in allen Regionen, in denen Amazon EMR Serverless verfügbar ist, verfügbar. Weitere Informationen und Beispiele für die Angabe geheimer Referenzen finden Sie unter Verwenden von SecretsManager in EMR Serverless.