Publicado: Nov 29, 2023
Hoje, o Amazon Redshift anuncia a disponibilidade geral do suporte para tabelas do Apache Iceberg. Agora, você pode acessar facilmente tabelas do Apache Iceberg em um data lake e associá-las a dados em um data warehouse. Esse recurso oferece maior performance se você estiver acessando as tabelas do data lake usando o Catálogo do AWS Glue montado automaticamente ou esquemas externos.
O Amazon Redshift permite que os clientes executem uma ampla variedade de workloads em data warehouses e data lakes, usando o suporte para vários formatos de tabela abertos, como Apache Hudi e Delta Lake. Agora, você pode usar tabelas do Iceberg para executar consultas de data lake com consistência transacional e gravar dados usando serviços compatíveis com ACID, como Amazon EMR, Amazon Athena ou AWS Glue. Este lançamento também introduz o suporte para compressão Zstandard com arquivos de dados Parquet e tabelas Apache Iceberg. O novo recurso oferece maiores taxas de compressão e melhor performance de compressão/descompressão. Com o suporte ao Iceberg recentemente introduzido nos catálogos de dados montados automaticamente, você pode acessar tabelas Iceberg existentes em Catálogos de Dados do AWS Glue usando o Redshift sem nenhum esforço adicional.
Você pode usar o suporte do Amazon Redshift ao Apache Iceberg em todas as regiões da AWS, exceto China (Pequim) e China (Ningxia). Para começar a usar, consulte o Guia de gerenciamento do Amazon Redshift.