AWS Glue Veri Kalitesi artık anormallik algılamayı ve sonuçları AWS Glue Veri Kataloğu'na yazmayı destekliyor
AWS Glue Veri Kalitesi artık Katalog tabanlı veri kalitesi değerlendirmeleri için anormallik algılamayı ve değerlendirme sonuçlarını AWS Glue Veri Kataloğu (GDC) tablolarına yazma özelliğini destekliyor. Bu özellikler hem ETL işleri hem de Katalog değerlendirmeleri arasında çalışır ve iş akışı türünden bağımsız olarak size tutarlı bir veri kalitesi deneyimi sunar.
GDC için anormallik algılama desteğiyle, açık eşiklere sahip kurallar yazmadan, makine öğrenimi destekli zaman serisi tahminlerini kullanarak farklı değerlerdeki ani düşüşler veya GDC tablolarınızdaki satır sayısı artışları gibi veri istatistiklerindeki beklenmedik değişiklikleri belirleyebilirsiniz. Bu, özellikle sorunları otomatik olarak ortaya çıkarması gereken GDC'de yüzlerce tabloyu izleyen veri mühendisleri için değerlidir.
GDC'de sonuç depolanmasıyla Veri Kalitesi kuralı sonuçları, profil oluşturma ölçümleri ve anormallik tahminleri (güven sınırları ile) GDC tablolarına geri yazılır ve tüm kalite değerlendirmelerinin sorgulanabilir bir kaydı oluşturulur. Değerlendirme ister bir ETL işinde ister doğrudan bir Katalog tablosunda çalışsın, sonuçlar standart SQL kullanılarak herhangi bir zamanda sorgulanabilir.
AWS Glue Veri Kalitesi anormallik algılama ve Katalog sonuçları depolaması tüm AWS ticari bölgelerinde ve AWS GovCloud (ABD) bölgelerinde kullanılabilir.
Kullanmaya başlamak için AWS Glue Veri Kalitesi belgelerini ziyaret edin.