AWS Glue ประกาศว่าความสามารถใหม่ในการตรวจคุณภาพข้อมูลของ Glue ที่ใช้ ML พร้อมให้ใช้งานโดยทั่วไปแล้ว

โพสต์บน: 8 ส.ค. 2024

AWS Glue ประกาศว่าความสามารถใหม่ของการตรวจคุณภาพข้อมูลของ AWS Glue (Glue DQ) พร้อมให้ใช้งานโดยทั่วไปแล้ว ซึ่งความสามารถนี้ใช้อัลกอริทึมการตรวจจับความผิดปกติด้วย ML เพื่อตรวจหาปัญหาคุณภาพของข้อมูลและความผิดปกติที่ตรวจพบได้ยาก จึงช่วยให้ลูกค้าสามารถระบุและแก้ไขปัญหาคุณภาพข้อมูลได้แบบเชิงรุก

วิศวกรและนักวิเคราะห์ข้อมูลใช้กฎใน Glue DQ เพื่อวัดและตรวจสอบข้อมูล แม้ว่าแนวทางแบบอิงตามกฎที่มีอยู่ของ Glue DQ จะใช้ได้ดีกับรูปแบบข้อมูลที่รู้จัก แต่ก็อาจไม่พบความผิดปกติที่ไม่คาดคิด ขณะนี้ วิศวกรและนักวิเคราะห์ข้อมูลสามารถใช้ความสามารถในการตรวจจับความผิดปกติของ Glue DQ เพื่อตรวจหาปัญหาคุณภาพของข้อมูลที่ไม่คาดคิดได้อย่างง่ายดาย หากจะใช้ฟีเจอร์นี้ ลูกค้าสามารถเขียนกฎหรือตัววิเคราะห์ขึ้นมา แล้วเปิดการตรวจหาความผิดปกติใน Glue ETL Glue DQ เก็บรวบรวมสถิติสำหรับคอลัมน์ที่ระบุไว้ในกฎและตัววิเคราะห์ ใช้อัลกอริทึม ML ตรวจหาความผิดปกติ และสร้างข้อมูลข้อสังเกตเป็นภาพที่เข้าใจง่ายเพื่ออธิบายปัญหาที่ตรวจพบ ลูกค้าสามารถใช้กฎที่แนะนำเพื่อเก็บบันทึกรูปแบบที่ผิดปกติ และให้ข้อเสนอแนะเพื่อปรับโมเดล ML ให้สามารถตรวจจับได้แม่นยำยิ่งขึ้นได้

หากต้องการเรียนรู้เพิ่มเติม โปรดไปที่บล็อกดูวิดีโอแนะนำเบื้องต้นหรืออ่านเอกสารประกอบ ความสามารถนี้พร้อมให้ใช้งานในสหรัฐอเมริกาฝั่งตะวันออก (เวอร์จิเนียฝั่งเหนือ), สหรัฐอเมริกาฝั่งตะวันออก (โอไฮโอ), สหรัฐอเมริกาฝั่งตะวันตก (ออริกอน), ยุโรป (ไอร์แลนด์), ยุโรป (สตอกโฮล์ม), ยุโรป (แฟรงก์เฟิร์ต), เอเชียแปซิฟิก (สิงคโปร์), เอเชียแปซิฟิก (ซิดนีย์) และเอเชียแปซิฟิก (โตเกียว)