Amazon Redshift, Confluent Cloud 및 Apache Kafka 지원 발표
Amazon Redshift는 이제 Amazon EC2 인스턴스에서 Confluent Managed Cloud 및 자체 관리형 Apache Kafka 클러스터로부터의 스트리밍 수집을 지원하여, Amazon Kinesis Data Streams(KDS) 및 Amazon Managed Streaming for Apache Kafka(Amazon MSK)을 넘어 기능을 확장합니다.
고객은 이번 업데이트로 광범위한 스트리밍 소스의 데이터를 Amazon Redshift 데이터 웨어하우스로 직접 수집할 수 있게 되었습니다. Amazon Redshift는 Amazon Redshift와 새로 지원되는 Kafka 스트리밍 소스 간의 보안 통신을 위한 인증 프로토콜로 mutual Transport Layer Security(mTLS)를 도입했습니다. 따라서 이러한 새로운 소스로부터 데이터를 수집해도 엔터프라이즈 데이터 워크플로에서 기대되는 높은 보안 표준을 유지할 수 있습니다. 또한, 새롭게 지원되는 이러한 Kafka 소스를 Amazon Redshift 외부 스키마 정의에서 손쉽게 식별할 수 있도록 새로운 SQL 식별자 'KAFKA'가 도입되었습니다.
확장된 스트리밍 수집 기능을 즉시 사용하여 포괄적이고 유연한 데이터 파이프라인을 구축함으로써, AWS에서 제공하는 소스(Amazon MSK), 파트너가 제공하는 소스(Confluent Cloud) 또는 Amazon EC2 기반의 자체 관리형 소스(Apache Kafka) 등 다양한 Kafka 소스에서 데이터를 수집할 수 있습니다.
자세히 알아보고 원하는 Kafka 소스에서 Amazon Redshift로 데이터 스트리밍을 시작하려면 Amazon Redshift 스트리밍 설명서를 참조하세요.