تعلن AWS Glue عن التوافر العام لإمكانات جودة بيانات Glue الجديدة المدعومة بتكنولوجيا تعلّم الآلة
تعلن AWS Glue عن التوفر العام لإمكانات جودة البيانات AWS Glue الجديدة (Glue DQ) التي تستخدم خوارزميات الكشف عن الأخطاء المدعمة بتكنولوجيا تعلّم الآلة للكشف عن المشاكل المتعلقة بجودة البيانات وأوجه الخلل التي يصعب العثور عليها. تساعد هذه الإمكانات العملاء على تحديد المشاكل المتعلقة بجودة البيانات وإصلاحها بشكل استباقي.
يستخدم مهندسو ومحللو البيانات القواعد الموجودة في Glue DQ لقياس حجم بياناتهم ومراقبة هذه البيانات. وعلى الرغم من أن نهج Glue DQ الحالي القائم على قواعد يعمل بصورة جيدة مع أنماط البيانات المعروفة، إلا أنه قد يفوت التعرف على أوجه خلل غير متوقعة. يستطيع مهندسو ومحللو البيانات الآن الاستفادة من إمكانات Glue DQ لاكتشاف مشاكل جودة البيانات غير المتوقعة بسهولة. للاستفادة من هذه الميزة، يستطيع العملاء كتابة القواعد أو أدوات التحليل اللازمة ثم تشغيل اكتشاف أوجه الخلل في Glue ETL. يقوم Glue DQ بجمع إحصائيات عن الأعمدة المحددة في القواعد وأدوات التحليل، وتطبيق خوارزميات تعلّم الآلة لاكتشاف أوجه الخلل، وتوليد ملاحظات مرئية يسهل فهمها توضح المشاكل التي تم التعرف عليها. يستطيع العملاء استخدام القواعد الموصى بها للكشف عن أوجه الخلل وتقديم ملاحظات لضبط نموذج تعلّم الآلة كي يصبح قادرًا على اكتشاف المشاكل بدرجة أكبر من الدقة.
لمعرفة المزيد من المعلومات، تفضل بقراءة المدونة أو مشاهدة الفيديو التمهيدي أو الرجوع إلى الوثائق. تتوفر هذه الإمكانات في شرق الولايات المتحدة (شمال فيرجينيا) وشرق الولايات المتحدة (أوهايو) وغرب الولايات المتحدة (أوريجون) وأوروبا (أيرلندا) وأوروبا (ستوكهولم) وأوروبا (فرانكفورت) وآسيا والمحيط الهادئ (سنغافورة) وآسيا والمحيط الهادئ (سيدني) وآسيا والمحيط الهادئ (طوكيو).