Publicado: Dec 7, 2021
Os trabalhos de streaming extrair, transformar e carregar (ETL) do AWS Glue agora podem ler as tabelas do AWS Glue Data Catalog criadas usando o AWS Glue Schema Registry. Com streaming ETL no AWS Glue, você pode configurar pipelines de ingestão contínua para preparar dados de streaming instantaneamente e disponibilizá-los para análise em segundos. O AWS Glue Schema Registry permite que você descubra, controle e desenvolva esquemas de fluxo de dados de maneira centralizada. Essa integração agiliza o processo de configuração do trabalho e simplifica a aplicação do esquema.
Os clientes podem usar esse recurso para gerenciar e aplicar o esquema de streaming de dados de eventos, como sequência de eventos de IoT, fluxos de cliques e logs de rede, e então configurar rapidamente tarefas ETL para processar os fluxos. Eles podem limpar e transformar esses fluxos de dados em trânsito e carregar continuamente os resultados em armazenamentos de dados para análise.
Este recurso está disponível nas mesmas regiões da AWS do AWS Glue.
Para saber mais, consulte nossa documentação.