Publicado: Nov 18, 2022
O Amazon Athena adicionou comandos SQL e formatos de arquivo que simplificam o armazenamento, a transformação e a manutenção de dados armazenados em tabelas do Apache Iceberg. Esses novos recursos permitem que engenheiros e analistas de dados combinem mais das conveniências familiares do SQL com as propriedades transacionais do Iceberg para permitir casos de uso de análise eficientes e robustos.
O lançamento de hoje adiciona os comandos CREATE TABLE AS SELECT (CTAS), MERGE e VACUUM que simplificam o gerenciamento do ciclo de vida de seus dados do Iceberg: o CTAS torna mais rápido e eficiente criar tabelas, o MERGE sincroniza tabelas em uma etapa para simplificar a preparação de dados e atualizar tarefas e o VACUUM ajuda você a gerenciar a pegada de armazenamento e excluir registros para atender aos requisitos regulatórios, como GDPR. Também adicionamos suporte para AVRO e ORC para que você possa criar tabelas do Iceberg com um conjunto mais amplo de formatos de arquivo. Por fim, agora você pode simplificar o acesso aos dados gerenciados pelo Iceberg usando exibições para ocultar junções, agregações e tipos de dados complexos.
Todos os novos recursos desse lançamento são compatíveis com o mecanismo do Athena versão 3 e podem ser usados com os drivers, a API ou o console do Athena e estão disponíveis em todas as regiões compatíveis.
Para saber mais sobre os novos recursos do Iceberg no Athena, consulte Using Iceberg tables na documentação do usuário do Athena.