Publicado: Nov 21, 2022
Os crawlers do AWS Glue agora oferecem suporte ao Snowflake, facilitando a compreensão das atualizações do esquema do Snowflake e a extração de insights significativos.
Para rastrear um banco de dados do Snowflake, os clientes podem criar e agendar um crawler do Glue com a URL JDBC que inclui informações de credenciais do AWS Secret Manager. Uma opção de configuração permite especificar se você deseja que o crawler rastreie todo o banco de dados ou limite as tabelas incluindo o caminho do esquema/tabela e o padrão de exclusão para reduzir o tempo de rastreamento. A cada execução do crawler, o crawler inspeciona e cataloga informações, como atualizações ou exclusões de tabelas do Snowflake, tabelas externas, visualizações e visões materializadas no Catálogo de Dados do AWS Glue. Para colunas do Snowflake com tipos não compatíveis com o Hive, como geografia ou geometria, o crawler extrairá essas informações como um tipo de dados brutos e as disponibilizará no Catálogo de Dados.
O suporte ao crawler do AWS Glue para Snowflake está disponível nas seguintes regiões da AWS: Leste dos EUA (Ohio, Norte da Virgínia), Oeste dos EUA (Oregon), Ásia-Pacífico (Tóquio, Osaka), Europa (Irlanda). Para saber mais, leia a publicação do blog e acesse a documentação do AWS Glue Crawler.