AWS Glue annuncia l'introduzione di una nuova funzionalità di Qualità dei dati di Glue basata sul ML
AWS Glue annuncia che è disponibile al pubblico una nuova funzionalità Qualità dei dati di AWS Glue (Glue DQ) che utilizza algoritmi di rilevamento delle anomalie basati sul ML per rilevare problemi e anomalie relativi alla qualità dei dati difficili da individuare. Ciò aiuta i clienti a identificare e risolvere in modo proattivo i problemi di qualità dei dati.
Gli ingegneri e gli analisti dei dati utilizzano le regole di Glue DQ per misurare e monitorare i propri dati. Sebbene sia efficace per modelli di dati noti, l'attuale approccio basato su regole di Glue DQ potrebbe non rilevare anomalie impreviste. Ora gli ingegneri e gli analisti dei dati possono utilizzare la funzionalità di rilevamento delle anomalie di Glue DQ per rilevare facilmente problemi imprevisti relativi alla qualità dei dati. Per utilizzare questa funzionalità i clienti possono scrivere regole o analizzatori e quindi attivare il rilevamento delle anomalie in Glue ETL. Glue DQ raccoglie statistiche per le colonne specificate in regole e analizzatori, applica algoritmi di ML per rilevare anomalie e genera osservazioni visive di facile comprensione che spiegano i problemi rilevati. I clienti possono utilizzare le regole consigliate per acquisire i modelli anomali e fornire feedback per ottimizzare il modello di ML in modo da rendere il rilevamento più accurato.
Per saperne di più, leggi il blog, guarda il video introduttivo o consulta la documentazione. Questa funzionalità è disponibile negli Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio), Stati Uniti occidentali (Oregon), Europa (Irlanda), Europa (Stoccolma), Europa (Francoforte), Asia Pacifico (Singapore), Asia Pacifico (Sydney) e Asia Pacifico (Tokyo).