Amazon SageMaker Unified Studio ora supporta la profilazione dei dati e il rilevamento delle anomalie
Amazon SageMaker Unified Studio ora supporta la profilazione dei dati e il rilevamento delle anomalie, con tecnologia della qualità dei dati di AWS Glue. Gli amministratori dei dati, data engineer e analisti possono generare profili statistici dei propri dati per comprenderne la struttura e la completezza, oltre a monitorare l'evoluzione di tali statistiche nel tempo. Il rilevamento delle anomalie aiuta a identificare i momenti in cui i punti dati deviano dai pattern storici, senza richiedere la definizione di soglie predefinite o regole personalizzate. Queste funzionalità sono disponibili sia per i dati a riposo nelle tabelle di catalogo, sia per i dati in transito all'interno dei job dell’ETL visivo.
Grazie a questo lancio, una scheda dedicata al profilo dati nelle tabelle di catalogo consente di eseguire la profilazione su richiesta e pianificata, calcolando le statistiche a livello di set di dati e di colonna. Man mano che la cronologia dei profili si accumula, il rilevamento delle anomalie definisce una baseline del comportamento previsto e segnala i punti dati che rientrano all'esterno dell'intervallo stimato. Ciò risulta particolarmente utile qualora non si sia a conoscenza di soglie specifiche o nei casi in cui i valori previsti cambino nel tempo, rendendo obsolete le regole fisse. Per i dati in transito, le medesime statistiche di profilazione e le funzionalità di rilevamento delle anomalie sono disponibili nella pagina dei risultati di qualsiasi job dell’ETL visivo contenente una trasformazione Evaluate Data Quality.
Questa nuova funzionalità è ora disponibile in tutte le regioni AWS in cui Amazon SageMaker Unified Studio è accessibile. Per ulteriori informazioni, consultare la documentazione di Amazon SageMaker Unified Studio.