Il Catalogo dati AWS Glue ora supporta l'ottimizzazione delle tabelle, le statistiche e i crawler per Apache Iceberg V3
Il Catalogo dati AWS Glue ora supporta l'ottimizzazione delle tabelle, le statistiche e i crawler per le tabelle Apache Iceberg versione 3 (V3). Con queste nuove funzionalità, puoi gestire automaticamente le tabelle V3, ottimizzarle per le prestazioni delle query e rilevarle in Amazon S3.
Con l'ottimizzazione delle tabelle, puoi compattare le tabelle V3 utilizzando strategie binpack, sort o z-order per migliorare le prestazioni delle query e rimuovere istantanee scadute e file orfani per ridurre i costi di archiviazione. Queste ottimizzazioni supportano i tipi di dati V3, inclusi i timestamp varianti, geospaziali e con precisione in nanosecondi. Puoi anche generare statistiche sul numero di valori distinti (NDV) per le tabelle V3, che i motori di analisi utilizzano per pianificare le query in modo efficiente. Inoltre, puoi utilizzare i crawler di Glue per individuare le tabelle V3 archiviate in Amazon S3 e registrarle nel Catalogo dati AWS Glue, rendendole disponibili per l'interrogazione con qualsiasi motore compatibile con V3.
Queste funzionalità sono disponibili per le tabelle Iceberg V3 in tutte le regioni AWS in cui sono disponibili l'ottimizzazione delle tabelle, le statistiche e i crawler del Catalogo dati AWS Glue. Per ulteriori informazioni, consulta Glue Optimization, Glue Statistics e Glue crawlers nella Guida per gli sviluppatori di Glue.