Publicado: Feb 6, 2023
Os Crawlers do AWS Glue oferecem suporte ao MongoDB para extrair o esquema de dados e preencher automaticamente o Catálogo de Dados do AWS Glue, que mantém os metadados atualizados. Hoje estamos expandindo o suporte para incluir o MongoDB Atlas. Esse recurso simplifica muito a inserção dos metadados gerenciados do MongoDB Atlas no catálogo de dados do AWS Glue, para que os engenheiros de dados possam integrar os dados do MongoDB Atlas com data lakes baseados em S3 e extrair insights significativos.
Com o lançamento de hoje, você pode criar e programar um Crawler do Glue para rastrear o MongoDB Atlas. No console do Crawler do Glue, você pode selecionar o MongoDB como fonte de dados. Você pode então criar uma conexão do Glue com o tipo de conexão “DocumentDB/MongoDB” e fornecer as informações e as credenciais de cluster do MongoDB Atlas. Depois que a configuração for criada, você poderá especificar o banco de dados e as coleções do MongoDB Atlas a serem rastreadas. A cada execução do crawler, ele inspeciona informações específicas de coleções e catálogos. Isso inclui atualizações ou exclusões de coleções, visualizações e visões materializadas do MongoDB Atlas no Catálogo de Dados do AWS Glue. Com o AWS Glue, agora você pode usar o Catálogo de Dados do AWS Glue como fonte para extrair dados do MongoDB Atlas e preencher um destino do Amazon S3.
O suporte do Crawler do AWS Glue para o MongoDB Atlas geralmente está disponível em todas as regiões comerciais nas quais o AWS Glue é oferecido. Para saber mais, leia o blog e acesse a documentação do Crawler do AWS Glue.