O Catálogo de Dados do AWS Glue agora oferece suporte à otimização de tabelas do Apache Iceberg na região Oeste dos EUA (N. da Califórnia)
O Catálogo de Dados do AWS Glue agora oferece suporte à otimização automática de tabelas para tabelas do Apache Iceberg na região Oeste dos EUA (N. da Califórnia). O Apache Iceberg é um formato de tabela aberto que fornece performance rápida de consultas em tabelas grandes em data lakes. Com esse lançamento, você pode ativar a otimização de tabelas para tabelas individuais ou para todas as tabelas em seu catálogo de dados.
As tabelas do Apache Iceberg acumulam arquivos pequenos, instantâneos e arquivos não referenciados a cada gravação, o que retarda as consultas e aumenta os custos de armazenamento ao longo do tempo. A otimização de tabelas monitora continuamente suas tabelas para compactar arquivos pequenos em segundo plano, remover instantâneos que ultrapassaram suas configurações de retenção e excluir arquivos não referenciados que não são mais necessários. Você pode monitorar cada execução a partir do console do AWS Glue, das métricas e dos logs do Amazon CloudWatch.
Você pode ativar a otimização de tabelas usando o console do AWS Glue, a CLI da AWS ou os SDKs da AWS. Para ver a lista completa de regiões em que a otimização de tabelas está disponível, consulte Regiões com suporte para otimizadores de tabela. Para saber mais, consulte Como otimizar tabelas do Iceberg no Guia do desenvolvedor do AWS Glue. Para começar a usá-lo, visite a página do produto AWS Glue.