Amazon Redshift unterstützt jetzt Apache-Iceberg-v3-Tabellen
Amazon Redshift unterstützt jetzt das Lesen aus und Schreiben in Apache-Iceberg-v3-Tabellen in Ihrem Data Lake. Apache Iceberg ist ein offenes Tabellenformat, und die Version v3 ergänzt mehrere neue Funktionen. Mit diesem Launch führt Amazon Redshift Unterstützung für Standardspaltenwerte, Zeilenherkunft und Löschvektoren ein.
Mit Standardspaltenwerten können Sie einen Anfangswert definieren, den Amazon Redshift anwendet, wenn kein Wert angegeben wird. Das vereinfacht die Schemaentwicklung beim Hinzufügen von Spalten zu bestehenden Tabellen. Zeilenherkunft macht Pseudospalten sichtbar, die die Identität jeder Zeile und die Sequenznummer der letzten Aktualisierung verfolgen. So können Sie inkrementelle Pipelines und CDC-Workflows (Change Data Capture) erstellen, die nur geänderte Zeilen verarbeiten. Löschvektoren ersetzen die positionellen Löschdateien von Iceberg v2 durch kompakte, komprimierte Bitmaps und ermöglichen schnellere Lese- und Schreibvorgänge für Workloads mit häufigen Aktualisierungen und Löschungen, etwa compliancegetriebene Datensatzentfernung. Sie können eine v3-Tabelle mit CREATE TABLE <table> ... USING ICEBERG TABLE PROPERTIES ('format-version' = '3') erstellen oder eine bestehende v2-Tabelle direkt mit ALTER TABLE <table> SET TABLE PROPERTIES ('format-version' = '3') aktualisieren.
Die Graviton-basierten bereitgestellten Serverless-Cluster von Amazon Redshift unterstützen das neue v3-Format. Weitere Informationen finden Sie unter Features von Apache Iceberg V3 in der Amazon-Redshift-Dokumentation.