AWS-Glue-Datenkatalog unterstützt jetzt die Tabellenoptimierung von Apache Iceberg in der Region USA West (Nordkalifornien)
Der AWS-Glue-Datenkatalog unterstützt jetzt die automatische Tabellenoptimierung für Apache Iceberg-Tabellen in der Region USA West (Nordkalifornien). Apache Iceberg ist ein offenes Tabellenformat, das eine schnelle Abfrageleistung für große Tabellen in Data Lakes bietet. Mit dieser Einführung können Sie die Tabellenoptimierung für einzelne Tabellen oder für alle Tabellen in Ihrem Datenkatalog aktivieren.
Apache Iceberg-Tabellen sammeln bei jedem Schreibvorgang kleine Dateien, Snapshots und unreferenzierte Dateien an, was Abfragen verlangsamt und die Speicherkosten im Laufe der Zeit erhöht. Die Tabellenoptimierung überwacht Ihre Tabellen kontinuierlich mit dem Ziel, kleine Dateien im Hintergrund zu komprimieren, Snapshots zu entfernen, die Ihre Aufbewahrungseinstellungen überschreiten, und unreferenzierte Dateien zu löschen, die nicht mehr benötigt werden. Sie können jeden Lauf über die AWS Glue-Konsole, Amazon CloudWatch-Metriken und Protokolle überwachen.
Sie können die Tabellenoptimierung mithilfe der AWS Glue-Konsole, der AWS CLI oder der AWS SDKs aktivieren. Eine vollständige Liste der Regionen, in denen Tabellenoptimierung verfügbar ist, finden Sie unter Unterstützte Regionen für Tabellenoptimierer. Weitere Informationen finden Sie unter Optimieren von Iceberg-Tabellen im AWS Glue-Entwicklerhandbuch. Besuchen Sie zunächst die AWS Glue-Produktseite.