发布于: Nov 29, 2023
今天,Amazon Redshift 宣布正式推出对 Apache Iceberg 表的支持。现在,您可以轻松访问数据湖上的 Apache Iceberg 表,并将其与数据仓库中的数据合并。无论您是使用自动安装的 AWS Glue 目录还是外部架构访问数据湖表,此功能都能提高性能。
Amazon Redshift 让客户能够利用其对 Apache Hudi 和 Delta Lake 等各种开放表格式的支持,在数据仓库和数据湖上运行各种工作负载。使用 Iceberg 表,您现在可以运行在事务方面一致的数据湖查询,同时使用 Amazon EMR、Amazon Athena 或 AWS Glue 等兼容 ACID 的服务并行写入数据。此次发布还引入了对 Parquet 数据文件和 Apache Iceberg 表的 Zstandard 压缩支持,可提供更高的压缩率和更好的压缩/解压缩性能。借助最近在自动安装的数据目录中引入的 Iceberg 支持,您可以使用 Redshift 访问您的 AWS Glue 数据目录中的现有 Iceberg 表,无需额外的操作。
除了中国(北京)和中国(宁夏)区域外,您可以在其他所有 AWS 区域使用 Amazon Redshift 中的 Apache Iceberg 支持。要开始使用,请访问 Amazon Redshift 管理指南。