Publicado: Nov 28, 2022
O AWS Glue agora oferece transformações visuais personalizadas que permitem aos clientes definir, reutilizar e compartilhar a lógica de ETL específica do negócio entre suas equipes. O AWS Glue é um serviço de integração de dados escalável e com tecnologia sem servidor que facilita a descoberta, preparação, movimentação e integração de dados de várias fontes. Com esse novo recurso, os engenheiros de dados podem escrever transformações reutilizáveis para o editor visual de trabalhos do AWS Glue. As transformações reutilizáveis aumentam a consistência entre as equipes e ajudam a manter os trabalhos atualizados, minimizando o esforço e o código duplicados.
Você pode definir transformações visuais personalizadas do AWS Glue usando o código do Apache Spark, bem como o formulário de entrada do usuário. Você também pode especificar validações para o formulário de entrada para ajudar a proteger os usuários para que não cometam erros. Depois de salvar os arquivos que definem a transformação em sua conta da AWS, ela aparece automaticamente na lista suspensa de transformações disponíveis no editor visual de trabalhos. Você pode chamar transformações visuais personalizadas de trabalhos visuais e baseados em código, e o compartilhamento de transformações entre contas da AWS é simples.
Para saber mais, acesse a documentação do AWS Glue, leia a postagem do blog e assista ao vídeo de lançamento.
Esse recurso está disponível nas mesmas regiões da AWS do AWS Glue.