AWS Glue 現在支援 Apache Iceberg 型具體化視觀表

張貼日期: 2025年11月30日

AWS Glue 現在支援具體化視觀表,這是一項新功能,可讓資料團隊更輕鬆地轉換資料並提高查詢效能。具體化視觀表是 AWS Glue Data Catalog 中的受管資料表,這些資料表能夠以 Apache Iceberg 格式儲存預先計算的查詢結果,並在來源資料變更時自動將資料表保持在最新狀態。此功能旨在讓資料工程師和分析團隊輕鬆透過多個階段轉換資料 (從原始資料轉換為最終分析資料表),同時降低工程工作量和營運費用。

客戶現在可以使用具有資料重新整理排程的標準 Spark SQL 語法來建立具體化視觀表。服務會自動處理重新整理排程、變更偵測、增量更新和運算基礎結構管理。Amazon Athena、Amazon EMR 和 AWS Glue 的 Spark 引擎會智慧地重新編寫查詢以使用這些具體化視觀表,從而將效能提高至最多 8 倍,同時降低運算成本。您可以使用 Athena 和 Redshift 等 SQL 查詢引擎,從 SQL 編輯器和 Amazon SageMaker 筆記本中將具體化視觀表作為 Iceberg 資料表加以存取。

AWS Glue 中的具體化視觀表適用於歐洲 (斯德哥爾摩)、亞太區域 (泰國)、亞太地區 (孟買)、歐洲 (巴黎)、美國東部 (俄亥俄)、歐洲 (愛爾蘭)、歐洲 (法蘭克福)、南美洲 (聖保羅)、亞太區域 (香港)、美國東部 (維吉尼亞北部)、亞太地區 (首爾)、亞太地區 (馬來西亞)、歐洲 (倫敦)、亞太地區 (東京)、美國西部 (奧勒岡)、美國西部 (加利佛尼亞北部)、亞太地區 (新加坡)、亞太地區 (雪梨)、加拿大 (中部) 和歐洲 (西班牙)。若要進一步了解,請參閱 AWS Glue 開發人員指南中的使用具體化視觀表