Publicado: May 12, 2023
Agora, os crawlers do AWS Glue Crawler permitem que os clientes usem seus próprios drivers JDBC personalizados para extrair esquemas de dados de fontes de dados e preencher o Catálogo de Dados do AWS Glue. Os crawlers do Glue já oferecem suporte às conexões JDBC do Glue a fontes de dados compatíveis na AWS. Agora, você pode trazer suas próprias versões do driver JDBC para se conectar às fontes de dados nos crawlers do Glue. Essas fontes de dados incluem Postgres, MySQL, Oracle, SQL Server e Amazon Redshift.
Para usar seu próprio driver JDBC, adicione o arquivo do driver ao bucket do Amazon S3. Em seguida, configure a conexão do Glue com o caminho do driver JDBC no S3 e o nome da classe. A cada execução do crawler do Glue, uma tarefa do Glue é iniciada usando o driver JDBC fornecido para inspecionar o esquema. Em seguida, o crawler do Glue cataloga as informações do esquema, como novas tabelas, exclusões e atualizações de esquemas no Catálogo de Dados do AWS Glue. Com o AWS Glue, você pode já usar o Catálogo de Dados do AWS Glue como origem para extrair dados dessas fontes de dados e preencher um destino no Amazon S3.
O suporte dos crawlers do AWS Glue para drivers JDBC personalizados está disponível em todas as regiões comerciais em que o AWS Glue é oferecido. Consulte a tabela de regiões da AWS. Para saber mais, acesse a documentação do crawler do AWS Glue.