AWS Glue Data Catalog, 이제 S3 Tables로 메타데이터 내보내기 지원(평가판)
AWS Glue Data Catalog는 데이터 검색과 이해에 도움을 주는 중앙 집중식 메타데이터 리포지토리로, 시맨틱 검색을 제공하며, 데이터세트에 비즈니스 컨텍스트를 추가하는 기능을 지원합니다(현재 평가판). 오늘 이 평가판에 2가지 새로운 기능을 추가했습니다. 이제 메타데이터 쿼리를 위해 S3 Tables로 카탈로그 메타데이터를 내보낼 수 있고, 시맨틱 검색 평가판이 AWS Key Management Service(AWS KMS) 고객 관리형 키로 암호화된 카탈로그까지 확장되었습니다.
Glue 메타데이터 내보내기를 활성화하면 용어집, 사용자 지정 메타데이터 첨부 파일, 자산 설명을 포함한 카탈로그의 기술 및 비즈니스 메타데이터가 관리형 aws-catalog S3 Tables 버킷의 테이블에 기록됩니다. 메타데이터는 Apache Iceberg 형식으로 저장되므로 Amazon Athena, Amazon QuickSight 같은 AWS 분석 서비스와 타사 도구 등, Iceberg를 지원하는 쿼리 엔진에서 표준 SQL을 사용하여 쿼리, 감사, 시간 이동 쿼리를 수행하여 기록 분석을 할 수 있습니다. 이를 통해 카탈로그 메타데이터를 다른 AWS 서비스 데이터와 결합하여 용어집 사용량, 메타데이터 변경 사항 감사 등 추가 분석을 수행할 수 있습니다. 고객 관리형 키로 암호화된 카탈로그가 이제 동일한 비즈니스 컨텍스트 보강, 시맨틱 검색을 지원합니다.
이러한 기능은 미국 동부(버지니아 북부), 미국 동부(오하이오), 미국 서부(오리건), 유럽(아일랜드) AWS 리전에서 사용할 수 있습니다. S3 Tables 요청 및 스토리지 요금은 S3 요금 기준으로 부과됩니다. 자세한 내용은 AWS Glue 사용 설명서를 참조하세요.