Amazon Redshift, 배치 워크로드를 위한 동시성 확장을 통해 데이터 수집 자동 확장
이제 Amazon Redshift가 동시성 확장을 대용량 데이터 수집 워크로드까지 확장하여, Amazon S3에서 수행ㅎ되는 Amazon Redshift COPY 쿼리에 대해 동시성 확장을 사용할 수 있게 되었습니다. 즉, 데이터 파이프라인은 수요가 급증하는 시간대에도 수집 속도와 쿼리 성능 사이에서 선택을 고민할 필요가 없습니다.
실시간 분석, 지속적인 ETL 또는 고빈도 보고 등 시간에 민감한 데이터 작업을 수행하는 조직은 트래픽 급증 시 데이터 수집 병목 현상을 자주 겪습니다. 지금까지는 읽기 쿼리만 동시성 확장이 지원되었기 때문에, 쓰기 작업이 많은 워크로드의 경우 동시 쿼리로 인해 여전히 리소스 경합이 발생할 수 있었습니다. 이번 출시로 Amazon Redshift는 데이터 수집 워크로드의 급격한 증가를 흡수하기 위해 추가 컴퓨팅 용량을 자동으로 프로비저닝하여 다음과 같은 이점을 제공합니다
- 더 빠른 COPY 성능: 배치 워크로드의 경우 동시성 확장이 이제 Amazon S3의 Parquet 및 ORC 파일 형식에 대한 COPY 작업을 지원합니다. Amazon Redshift COPY 쿼리에 대한 동시성 확장을 활성화하면, 동시 워크로드가 많은 상황에서도 대기열 지연 없이 여러 파일을 동시에 로드할 수 있습니다.
- 운영 부담 없음: 수동 클러스터 크기를 수동으로 조정하거나 워크로드 스케줄을 변경할 필요가 없습니다. Amazon Redshift Serverless에서는 수요에 따라 동시성 확장이 자동으로 활성화 및 비활성화되며, Amazon Redshift Provisioned에서는 사전 설정된 구성에 따라 동작합니다.
이 기능은 Amazon Redshift Serverless 및 프로비저닝 데이터 웨어하우스 모두에 대해 모든 AWS 상용 리전과 AWS GovCloud(미국) 리전에서 정식 버전으로 제공됩니다. 마이그레이션이나 구성 변경은 필요하지 않으며, 동시성 확장을 활성화하기만 하면 데이터 수집 워크로드에 즉시 적용됩니다. 자세한 내용은 Amazon Redshift Concurrency Scaling 설명서를 참조하세요.