Publié le: Nov 21, 2022
Les crawlers AWS Glue prennent désormais en charge Snowflake, ce qui vous permet de comprendre plus facilement les mises à jour du schéma Snowflake et d'en extraire d'importantes informations.
Pour analyser une base de données Snowflake, les clients peuvent créer et programmer un crawler Glue avec une URL JDBC et des informations d'identification à partir d'AWS Secret Manager. Une option de configuration vous permet de spécifier si vous souhaitez que le crawler analyse la totalité de la base de données ou limite les tables en incluant le schéma/chemin de table et le modèle d'exclusion pour réduire le temps d'analyse. À chaque exécution du crawler, celui-ci inspecte et catalogue les informations, notamment les mises à jour ou les suppressions de tables Snowflake, de tables externes, de vues et de vues matérialisées dans le catalogue de données AWS Glue. Pour les colonnes Snowflake dont les types ne sont pas compatibles avec Hive, par exemple la géographie ou la géométrie, le crawler extraira ces informations en tant que type de données brutes et les mettra à disposition dans le catalogue de données.
La prise en charge du crawler AWS Glue pour Snowflake est disponible de manière générale dans les régions AWS suivantes : USA Est (Ohio, Virginie du Nord), USA Ouest (Oregon), Asie-Pacifique (Tokyo, Osaka), Europe (Irlande). Pour en savoir plus, lisez le blog et consultez la documentation relative au crawler AWS Glue.