Amazon S3 agora oferece suporte à compactação por classificação e ordem z para tabelas do Apache Iceberg
Agora, o Amazon S3 oferece suporte à compactação por classificação e ordem z para tabelas do Apache Iceberg, disponíveis nas Tabelas do Amazon S3 e em buckets do S3 de uso geral usando a otimização do Catálogo de Dados do AWS Glue. A compactação de classificação nas tabelas do Iceberg minimiza o número de arquivos de dados digitalizados pelos mecanismos de consulta, resultando em melhor performance de consulta e custos reduzidos. A compactação por ordem Z oferece benefícios adicionais de performance por meio da remoção eficiente de arquivos ao consultar várias colunas simultaneamente.
As Tabelas do S3 oferecem uma experiência totalmente gerenciada na qual a classificação hierárquica é aplicada automaticamente às colunas durante a compactação quando uma ordem de classificação é definida nos metadados da tabela. Quando vários predicados de consulta precisam ser priorizados igualmente, você pode ativar a compactação por ordem z por meio da API de manutenção das Tabelas do S3. Se você estiver usando tabelas do Iceberg em buckets do S3 de uso geral, a otimização pode ser habilitada no console do Catálogo de Dados do AWS Glue, onde você pode especificar seu método de compactação preferido.
Esses recursos adicionais de compactação estão disponíveis em todas as regiões da AWS nas quais as Tabelas do S3 ou a otimização com o Catálogo de Dados do AWS Glue estão disponíveis. Para saber mais, leia o blog de notícias da AWS e consulte a documentação de manutenção das Tabelas do S3 e a documentação de otimização do Catálogo de Dados do AWS Glue.