AWS Glue Data Quality, 이제 데이터 프로파일링을 위한 분포 통계를 지원
AWS Glue Data Quality에서 이제 데이터에 대한 빈도 분포 프로필을 생성하는 새로운 분포 분석기를 지원합니다. 데이터 품질 정의 언어(DQDL)에서 이 새로운 분포 분석기를 사용하면 숫자 열에 대한 히스토그램과 범주형, 날짜 및 부울 열에 대한 값 분포를 생성할 수 있습니다. 사용자 지정 빈 수를 지원하므로, 사용 사례에 가장 중요한 세부 수준으로 데이터의 모양과 패턴을 탐색할 수 있습니다.
데이터 분포 방식을 이해하는 것은 신뢰할 수 있는 데이터 파이프라인을 구축하기 위한 토대가 됩니다. 분포 통계를 사용하면 사용자 지정 코드를 작성하지 않고도 데이터세트 전반의 왜곡, 이상치, 예상치 못한 패턴을 빠르게 식별할 수 있습니다. 이 기능은 기존 DQDL 규칙 세트와 직접 통합되므로 단일 평가 실행으로 현재 데이터 품질 검사와 함께 분포 프로파일링을 추가할 수 있습니다. 분포 통계는 추후 Amazon Athena와 같은 서비스를 통해 쿼리를 수행할 수 있도록 Amazon S3에 저장되며, API를 통해서도 표시되므로 분포 인사이트를 SageMaker Unified Studio를 비롯한 모니터링 워크플로와 시각화 도구에 쉽게 통합할 수 있습니다.
AWS Glue Data Quality 분포 통계는 모든 AWS 상용 리전 및 AWS GovCloud(미국) 리전에서 사용할 수 있습니다.
Glue Data Quality에 대해 자세히 알아보려면 AWS Glue Data Quality 설명서를 참조하세요. 분포 분석기 사용을 시작하려면 분석기 설명서를 참조하세요.