Amazon Redshift anuncia la compatibilidad con Confluent Cloud y Apache Kafka

Publicado en: 22 de nov de 2024

Amazon Redshift ahora admite la ingesta de streaming desde clústeres Apache Kafka autoadministrado y de Confluent Managed Cloud en instancias de Amazon EC2. De esta manera, se amplían sus capacidades más allá de Amazon Kinesis Data Streams (KDS) y Amazon Managed Streaming para Apache Kafka (MSK).

Con esta actualización, los clientes pueden incorporar datos de una gama más amplia de orígenes de streaming directamente a sus almacenes de datos de Amazon Redshift. Amazon Redshift presenta seguridad de la capa de transporte manual (mTLS) como protocolo de autenticación para ofrecer una comunicación segura entre Amazon Redshift y los orígenes de streaming de Kafka recientemente compatibles. Esto garantiza que la ingesta de datos de estos nuevos orígenes mantenga los altos estándares de seguridad esperados en los flujos de trabajo de datos empresariales. Además, se ha introducido un nuevo identificador de SQL, “KAFKA”, para simplificar la identificación de estos orígenes de Kafka recientemente compatibles en las definiciones de esquemas externos de Amazon Redshift.

Puede empezar a utilizar esta capacidad ampliada de ingesta de streaming de inmediato para crear canalizaciones de datos más completas y flexibles que ingieran datos de varios orígenes de Kafka: las que ofrece AWS (Amazon MSK), las que ofrecen los socios (Confluent Cloud) o las que se administran automáticamente (Apache Kafka) en Amazon EC2.

Para obtener más información y empezar a transmitir datos a Amazon Redshift desde cualquier origen de Kafka, consulte la documentación de streaming de Amazon Redshift.