Chất lượng dữ liệu AWS Glue hiện hỗ trợ thống kê phân phối để cấu hình dữ liệu
Chất lượng dữ liệu AWS Glue hiện hỗ trợ Trình phân tích phân phối mới tạo cấu hình phân phối tần suất cho dữ liệu của bạn. Sử dụng Trình phân tích phân phối mới này trong Ngôn ngữ định nghĩa chất lượng dữ liệu (DQDL), bạn có thể tạo biểu đồ cho các cột số và phân phối giá trị cho các cột phân loại, ngày tháng và boolean. Với hỗ trợ cho số lượng nhóm dữ liệu tùy chỉnh, bạn có thể khám phá hình dạng và mẫu dữ liệu của mình ở mức độ chi tiết quan trọng nhất đối với trường hợp sử dụng của bạn.
Hiểu cách phân phối dữ liệu là nền tảng để xây dựng quy trình dữ liệu đáng tin cậy. Thống kê phân phối giúp bạn nhanh chóng xác định sai lệch, ngoại lệ và các mẫu ngoài dự kiến trên các tập dữ liệu của bạn mà không cần viết mã tùy chỉnh. Khả năng này tích hợp trực tiếp với bộ quy tắc DQDL hiện có của bạn, vì vậy bạn có thể thêm cấu hình phân phối cùng với kiểm tra chất lượng dữ liệu cập nhật của mình trong một lượt chạy đánh giá duy nhất. Thống kê phân phối được lưu trữ trong Amazon S3 để truy vấn trong tương lai thông qua các dịch vụ như Amazon Athena và cũng được hiển thị thông qua API, giúp dễ dàng tích hợp thông tin chuyên sâu về phân phối vào quy trình công việc giám sát và các công cụ biểu diễn trực quan, bao gồm Studio hợp nhất của SageMaker.
Thống kê phân phối Chất lượng dữ liệu AWS Glue có sẵn ở tất cả các khu vực AWS thương mại và khu vực AWS GovCloud (Hoa Kỳ).
Để tìm hiểu thêm về Chất lượng dữ liệu Glue, hãy truy cập tài liệu về Chất lượng dữ liệu AWS Glue. Để bắt đầu sử dụng Trình phân tích phân phối, hãy truy cập tài liệu về Trình phân tích.