Mengumumkan peningkatan Data Quality Definition Language (DQDL) untuk Kualitas Data AWS Glue

Dikirim di: 28 Jun 2024

Pelanggan menggunakan Kualitas Data AWS Glue, fitur AWS Glue, untuk mengukur dan memantau kualitas data mereka. Mereka membuat aturan kualitas data menggunakan DQDL untuk memastikan data mereka akurat. Pelanggan memerlukan kemampuan untuk membuat aturan untuk skenario bisnis kompleks yang mencakup kondisi filter, kondisi pengecualian, validasi untuk nilai kosong, dan aturan gabungan. Sebelumnya pelanggan menulis SQL untuk melakukan validasi kualitas data ini dalam jenis aturan CustomSQL. Hari ini, AWS Glue mengumumkan serangkaian peningkatan baru untuk DQDL yang memungkinkan teknisi data dengan mudah membuat aturan kualitas data yang kompleks menggunakan jenis aturan asli. DQDL sekarang mendukung

  • Operator NOT yang memungkinkan pelanggan untuk mengecualikan nilai-nilai tertentu dalam aturan mereka.
  • Kata kunci baru seperti NULL, EMPTY, dan WHITESPACES_ONLY untuk membuat aturan yang menangkap nilai yang hilang tanpa ekspresi reguler yang kompleks.
  • Aturan gabungan bagi pelanggan untuk membuat aturan bisnis yang rumit. Mereka sekarang dapat menentukan opsi untuk mengelola urutan evaluasi aturan ini.
  • Klausa WHERE di DQDL untuk memfilter data sebelum menerapkan aturan.

Lihat panduan DQDL untuk informasi lebih lanjut.

Kualitas Data AWS Glue tersedia di semua wilayah komersial di mana AWS Glue tersedia. Untuk mempelajari lebih lanjut, kunjungi halaman produk AWS Glue dan dokumentasi kami.