Amazon S3 unterstützt jetzt die Sortierung und die Komprimierung in Z-Reihenfolge für Apache-Iceberg-Tabellen
Amazon S3 unterstützt jetzt die Sortierung und die Komprimierung in Z-Reihenfolge für Apache-Iceberg-Tabellen, die sowohl in Amazon S3 Tables als auch in allgemeinen S3-Buckets mithilfe der AWS-Glue-Datenkatalogoptimierung verfügbar sind. Die Sortierkomprimierung in Iceberg-Tabellen minimiert die Anzahl der von Abfrage-Engines gescannten Datendateien, was zu einer verbesserten Abfrageleistung und niedrigeren Kosten führt. Die Komprimierung in Z-Reihenfolge bietet zusätzliche Leistungsvorteile durch effizientes Bereinigen von Dateien, wenn Abfragen über mehrere Spalten gleichzeitig durchgeführt werden.
S3 Tables bieten eine vollständig verwaltete Oberfläche, bei der die hierarchische Sortierung während der Komprimierung automatisch auf Spalten angewendet wird, wenn eine Sortierreihenfolge in den Tabellenmetadaten definiert wird. Wenn mehrere Abfrageprädikate gleich priorisiert werden müssen, können Sie die Komprimierung in Z-Reihenfolge über die Wartungs-API für S3 Tables aktivieren. Wenn Sie Iceberg-Tabellen in allgemeinen S3-Buckets verwenden, kann die Optimierung in der AWS-Glue-Datenkatalog-Konsole aktiviert werden, wo Sie Ihre bevorzugte Komprimierungsmethode angeben können.
Diese zusätzlichen Komprimierungsfunktionen sind in allen AWS-Regionen verfügbar, in denen S3 Tables oder Optimierungen mit dem AWS-Glue-Datenkatalog verfügbar sind. Um mehr zu erfahren, lesen Sie den AWS-News-Blog und besuchen Sie die Wartungsdokumentation zu S3 Tables und die Dokumentation zur Optimierung vom AWS-Glue-Datenkatalog.