AWS Glue unterstützt jetzt Katalogverbund für Remote-Apache-Iceberg-Kataloge in AWS-GovCloud-Regionen (USA)
AWS Glue unterstützt jetzt den Katalogverbund für Remote-Iceberg-REST-Kataloge in AWS-GovCloud-Regionen (USA). Diese Funktion bietet direkten und sicheren Zugriff auf Iceberg-Tabellen, die in Amazon S3 gespeichert und mit AWS-Analyse-Engines in Remote-Katalogen katalogisiert sind.
Mit dem Katalogverbund können Sie mithilfe Ihrer bevorzugten AWS-Analytik-Engines eine Verbindung zu Iceberg-Tabellen in Remote-Katalogen herstellen, ohne Tabellen verschieben oder kopieren zu müssen. Es synchronisiert Metadaten in Echtzeit zwischen dem AWS-Glue-Datenkatalog und dem Remote-Katalog, wenn Datenteams Iceberg-Tabellen abfragen. Das bedeutet, dass die Abfrageergebnisse immer mit den neuesten Metadaten auf dem neuesten Stand sind. Sie können jetzt das beste Preis-Leistungs-Verhältnis für Ihre Workloads wählen, wenn Sie Remote-Iceberg-Tabellen mit Ihren bevorzugten AWS-Analytik-Engines analysieren und gleichzeitig konsistente Sicherheitskontrollen bei der Datenerkennung oder -abfrage beibehalten. Der Katalogverbund wird von einer Vielzahl von Analytik-Engines unterstützt, darunter Amazon Redshift, Amazon EMR, Amazon Athena, AWS Glue und Engines von Drittanbietern wie Apache Spark.
Der Katalogverbund verwendet AWS Lake Formation für Zugriffskontrollen, sodass Sie detaillierte Zugriffskontrollen, kontoübergreifende gemeinsame Nutzung und vertrauenswürdige Identitätsverbreitung verwenden können, wenn Sie Remote-Katalogtabellen mit anderen Datenverbrauchern teilen. Der Katalogverbund kann in Katalogimplementierungen integriert werden, die die Iceberg-REST-Spezifikationen unterstützen.
Der Katalogverbund ist in der Lake-Formation-Konsole und über die SDKs und APIs von AWS Glue und Lake Formation verfügbar. Dieses Feature ist in den Regionen AWS GovCloud (USA-West) und AWS GovCloud (USA-Ost) generell verfügbar. Weitere Informationen finden Sie in der Dokumentation.