AWS-Glue-Datenkatalog unterstützt jetzt Metadatenexporte in S3-Tabellen (Vorschau)
AWS-Glue-Datenkatalog ist ein zentralisiertes Metadaten-Repository, das Ihnen hilft, Daten zu entdecken und zu verstehen. Es bietet semantische Suche und Unterstützung für das Hinzufügen von Geschäftskontexten zu Datensätzen, die sich derzeit in der Vorschau befinden. Heute fügen wir dieser Vorschau zwei neue Funktionen hinzu: Exportieren von Katalogmetadatenexporten in S3-Tabellen zur Metadatenabfrage und Erweiterung der semantischen Suchvorschau auf Kataloge, die mit kundenverwalteten Schlüsseln von AWS Key Management Service (AWS KMS) verschlüsselt sind.
Wenn Sie den Glue-Metadatenexport aktivieren, werden die technischen und geschäftlichen Metadaten Ihres Katalogs, einschließlich Glossarbegriffen, benutzerdefinierten Metadatenanhängen und Asset-Beschreibungen, in Tabellen im verwalteten S3-Tabellen-Bucket von aws-catalog geschrieben. Metadaten werden im Apache Iceberg-Format gespeichert, sodass Sie Zeitreiseabfragen für historische Analysen mithilfe von Standard-SQL in Abfrage-Engines, die Iceberg unterstützen, z. B. AWS-Analysedienste wie Amazon Athena und Amazon QuickSight sowie Tools von Drittanbietern, abfragen, prüfen und durchführen können. Auf diese Weise können Sie Katalog-Metadaten mit anderen AWS-Servicedaten für zusätzliche Analysen verknüpfen, z. B. zur Überprüfung der Glossarnutzung und von Metadatenänderungen. Kataloge, die mit vom Kunden verwalteten Schlüsseln verschlüsselt sind, unterstützen jetzt dieselbe geschäftliche Kontextanreicherung und semantische Suche.
Diese neuen Funktionen sind in den folgenden AWS-Regionen verfügbar: USA Ost (Nord-Virginia), USA Ost (Ohio), USA West (Oregon) und Europa (Irland). Anforderungen und Speicher für S3-Tabellen werden auf der Grundlage der S3-Preise berechnet. Weitere Informationen finden Sie im Benutzerhandbuch für AWS Glue.