Amazon DynamoDB를 소스로 사용하는 AWS Glue 제로 ETL 통합에서 신규 구성 지원
이제 AWS Glue 제로 ETL에서 Amazon DynamoDB를 소스로 사용하는 통합을 대상으로 구성 가능 변경 데이터 캡처(CDC) 새로 고침 간격 및 온디맨드 데이터 수집을 지원합니다. 이처럼 지원이 개선됨에 따라 Amazon DynamoDB 테이블에서 데이터 변경 사항이 캡처되는 빈도를 사용자 지정할 수 있습니다. 새로 고침 간격은 15분~6일 사이로 지정할 수 있으며 필요 시에는 데이터 수집을 즉시 트리거할 수 있습니다. 이러한 기능을 활용하면 Amazon DynamoDB 소스에서 수행하는 제로 ETL 통합과 동일한 방식으로 Salesforce, SAP, ServiceNow 등의 SaaS 소스에서 제로 ETL 통합을 수행해 기능 패리티를 유지할 수 있습니다. 즉, 여러 소스 유형 전체에서 기능의 일관성을 유지할 수 있습니다.
CDC 새로 고침 간격을 구성할 수 있으므로 구체적인 업무상의 요구 사항에 맞게 변경 캡처 빈도를 조정하여 데이터 파이프라인 성능을 최적화할 수 있습니다. 가령 15분마다 실시간에 가깝게 데이터를 업데이트해야 할 수도 있고, 비용을 줄이기 위해 간격을 더 길게(최대 6일) 설정할 수도 있습니다. 온디맨드 수집 기능을 사용하면 예약된 다음 CDC 간격까지 기다리지 않고 중요한 데이터 변경 사항을 즉시 캡처할 수 있습니다. 이 기능은 분석, 보고 또는 다운스트림 애플리케이션에 데이터를 즉시 사용할 수 있어야 하는 시나리오에서 유용합니다. 해당 기능을 활용하면 데이터 새로 고침 요구 사항과 운영 효율성 간의 균형을 적절하게 유지할 수 있습니다.
이 기능은 현재 AWS Glue 제로 ETL이 지원되는 모든 AWS 리전에서 사용 가능합니다.
Amazon DynamoDB 통합을 위한 CDC 새로 고침 간격 및 온디맨드 수집을 구성하는 과정을 시작하려면 AWS Glue 사용 설명서를 참조하세요. AWS Glue 제로 ETL 통합에 대해 자세히 알아보려면 AWS Glue 설명서를 참조하세요.