AWS Glue- Data Catalog unterstützt jetzt die automatische Optimierung von Apache Iceberg-Tabellen über Amazon VPC
AWS-Glue-Datenkatalog unterstützt jetzt die automatische Optimierung von Apache Iceberg-Tabellen, auf die nur von einer spezifischen VPC -Umgebung ( Amazon Virtual Private Cloud) aus zugegriffen werden kann. Sie können die automatische Optimierung aktivieren, indem Sie eine VPC-Konfiguration bereitstellen, um den Speicher zu optimieren und die Abfrageleistung zu erhöhen, während gleichzeitig die Sicherheit Ihrer Tabellen gewährleistet wird.
Der AWS Glue-Datenkatalog unterstützt die Komprimierung, Snapshot-Aufbewahrung und Verwaltung unreferenzierter Dateien, die Ihnen helfen, Metadaten-Overhead zu reduzieren, Speicherkosten zu kontrollieren und die Abfrageleistung zu erhöhen. Kunden, die über Governance- und Sicherheitseinstellungen verfügen, für die ein Amazon S3-Bucket in einer spezifischen VPC erforderlich ist , können diese jetzt mit Glue-Katalog verwenden. Dadurch erhalten Sie umfassendere Funktionen für die automatische Verwaltung Ihrer Apache Iceberg-Daten, unabhängig davon, wo diese auf Amazon S3 gespeichert sind.
Die automatische Optimierung für Iceberg-Tabellen über Amazon VPC ist in 13 AWS-Regionen verfügbar: USA Ost (Nord-Virginia, Ohio), USA West (Oregon), Europa (Irland, London, Frankfurt, Stockholm), Asien-Pazifik (Tokio, Seoul, Mumbai, Singapur, Sydney), Südamerika (São Paulo). Kunden können diese über die AWS-Konsole, die AWS CLI oder die AWS SDKs aktivieren.
Um zu beginnen, können Sie die Glue-Netzwerkverbindung jetzt als zusätzliche Konfiguration mit optimierenden Einstellungen wie z. B. der Standardaufbewahrungsdauer oder die Tage für die Aufbewahrung von unreferenzierten Dateien, bereitstellen. Der AWS Glue-Datenkatalog verwendet die VPC-Informationen in der Glue-Verbindung, um auf Amazon S3-Buckets zuzugreifen und Apache Iceberg-Tabellen zu optimieren.
Weitere Informationen finden Sie im Blog sowie in der Dokumentation zu AWS-Glue-Datenkatalog.