Publicado: Nov 26, 2023
O AWS Glue anuncia a pré-visualização de um novo recurso de qualidade de dados do Glue que usa algoritmos de detecção de anomalias baseados em ML para detectar problemas e anomalias de qualidade de dados difíceis de localizar. O recurso ajuda os clientes a identificar e corrigir proativamente problemas de qualidade para que os usuários dos dados possam tomar decisões de negócios com confiança.
Engenheiros e analistas de dados criam regras de qualidade de dados para medir e monitorar dados. As regras funcionam bem quando eles sabem o que esperar dos dados. No entanto, as regras não conseguem identificar padrões anômalos, como aumentos repentinos de valores faltantes ou quedas súbitas no número de registros. Com esse novo recurso, engenheiros e analistas de dados já podem habilitar facilmente algoritmos de detecção de anomalias para analisar estatísticas de dados ao longo do tempo e gerar insights sobre esses padrões anômalos. O novo recurso também recomenda regras que podem ser facilmente adicionadas aos pipelines de dados para monitoramento contínuo. Para obter mais informações, consulte o blog e a documentação.
Esse novo recurso está disponível para pré-visualização nas seguintes regiões da AWS: Leste dos EUA (Ohio), Leste dos EUA (Norte da Virgínia), Oeste dos EUA (Oregon), Ásia-Pacífico (Tóquio) e Europa (Irlanda).
Para saber mais, leia a documentação e a publicação de blog.