Publié le: Mar 27, 2023
AWS Glue Crawler prend désormais en charge des fonctionnalités d'exploration améliorées dans les régions AWS GovCloud (US), simplifiant ainsi l'exécution des robots d'exploration avec AWS Lake Formation, la découverte de jeux de données et le remplissage de schémas dans le catalogue de données AWS Glue.
Grâce aux fonctionnalités d'exploration améliorées, vous pouvez utiliser Lake Formation pour simplifier la configuration du robot d'exploration et bénéficier d'autorisations centralisées pour l'exploration des lacs de données AWS S3 au sein des comptes et entre ces derniers. Vous pouvez réduire les temps d'exploration en utilisant les notifications d'événements Amazon S3 sur les tables du catalogue de données Glue, une fonctionnalité qui simplifie la découverte des jeux de données en analysant uniquement les données en fonction des événements dans Amazon S3. Vous pouvez désormais explorer davantage de sources de données, notamment Snowflake, MongoDB Atlas et les tables natives de Delta Lake, et réaliser votre gestion grâce à un audit simplifié reposant sur des métriques de coûts relatives aux exécutions précédentes des robots d'exploration.
Les fonctionnalités d'exploration améliorées d'AWS Glue Crawler sont déjà disponibles dans toutes les régions commerciales, dans les régions Chine et désormais dans les régions AWS GovCloud (US). Pour en savoir plus sur l'utilisation de Crawler avec Lake Formation dans l'architecture de maillage de données, consultez le blog ainsi que la documentation relative à AWS Glue Crawler.