Solución de datos de streaming para Amazon MSK

Un servicio de streaming de datos en tiempo real escalable de forma masiva y duradero que le permite capturar datos de forma continua para su procesamiento
Ver la guía de implementación

Información general

La solución de datos de streaming para Amazon MSK proporciona plantillas de AWS CloudFormation en las que los datos fluyen entre los productores, el almacenamiento en streaming, los consumidores y los destinos. Para admitir varios casos de uso y necesidades empresariales, esta solución ofrece cuatro plantillas de AWS CloudFormation. De manera similar a la solución de datos de streaming para Amazon Kinesis, las plantillas se configuran con el fin de aplicar las prácticas recomendadas y supervisar la funcionalidad mediante paneles y alarmas, así como para proteger los datos.

Los datos de streaming se pueden capturar de forma duradera mediante el almacenamiento escalable masivo, que es capaz de administrar un volumen de datos alto procedente de los productores de datos. Un productor pueden ser miles de orígenes de datos, cada uno generando datos de streaming de manera continua y que, normalmente, envían registros de manera simultánea y en tamaños reducidos (kilobytes).

Los datos de streaming incluyen diversos tipos de datos, como archivos de registros generados por los clientes que utilizan aplicaciones móviles o web, compras electrónicas, actividades de los jugadores en un juego, información de redes sociales, operaciones bursátiles o servicios geoespaciales, así como telemetría de dispositivos conectados o instrumentación en centros de datos.

Casos de uso de esta solución de AWS
Almacenamiento de datos

Beneficios

Configuración automatizada
Configure de forma automática los servicios de AWS necesarios para capturar, almacenar, procesar y entregar datos de streaming con facilidad.
Cuatro opciones de plantillas
Elija entre las cuatro diferentes opciones de plantillas de AWS CloudFormation. Prueba nuevas combinaciones de servicios para el entorno de producción y mejore las aplicaciones existentes.
Casos de uso en tiempo real
Capture registros de aplicaciones de alto volumen, analice datos de secuencias de clics, entregue de manera continua a un lago de datos y más.
Código fuente personalizable
Personalice el código repetitivo de la solución y, tras ello, utilice las capacidades de supervisión para pasar rápidamente de la etapa de pruebas a la fase de producción.

Detalles técnicos

En el siguiente esquema, se muestran las cuatro plantillas de AWS CloudFormation que puede implementar automáticamente con la guía de implementación de la solución.
  • Opción 1
  • Plantilla de AWS CloudFormation mediante Amazon Managed Streaming para Apache Kafka (Amazon MSK)
    Opción 1: plantilla de AWS CloudFormation mediante Amazon MSK

    Contenido relacionado

    Blog de arquitectura de AWS
    Copia de seguridad de Amazon MSK para archivar, reproducir o analizar

    Este artículo explica los patrones y las soluciones que se pueden utilizar para realizar copias de seguridad de temas de MSK en S3, lo que permite a los clientes reducir la configuración de retención de datos a largo plazo en MSK. Algunos clientes almacenan datos a largo plazo en MSK para cargas de trabajo de análisis de datos y Machine Learning. Compartimos un patrón para simplificar esta arquitectura mediante la descarga de datos de temas en S3 y el uso de S3 para análisis y ML.

    Lea el blog 
    Formación
    Aspectos fundamentales sobre el análisis de datos

    En este curso autoguiado, aprenderá sobre el proceso que se sigue para planificar soluciones de análisis de datos y sobre los distintos procesos de análisis de datos que intervienen.

    Inscríbase ahora 
    Formación
    Laboratorios de Amazon MSK

    Este sitio contiene información y laboratorios prácticos relacionados con Amazon MSK. Estos laboratorios pueden funcionar con cuentas personales o corporativas de AWS o cuentas provistas por equipos de cuentas de AWS para eventos que usan Event Engine.

    Inscríbase ahora 
    Acerca de esta implementación
    Versión
    1.7.2
    Lanzamiento
    01/2023
    Autor
    AWS
    Tiempo de implementación estimado
    25-30 minutos
    Costo estimado
    Consulte los detalles
    Ver la guía de implementación
    Descargar guía de implementación  Código fuente  Plantilla de CloudFormation  Suscríbase a la fuente RSS 
    Opciones de despliegue
    ¿Listo para comenzar?
    Inicie esta solución en la consola de AWS para implementarla
    Lanzar en la consola de AWS
    ¿Le resultó útil esta solución de AWS?
    Sí
    No
    Comparta su opinión
  • Opción 2
  • Plantilla AWS CloudFormation mediante Amazon MSK y AWS Lambda
    Opción 2: plantilla de AWS CloudFormation mediante Amazon MSK y AWS Lambda

    Contenido relacionado

    Blog de arquitectura de AWS
    Copia de seguridad de Amazon MSK para archivar, reproducir o analizar

    Este artículo explica los patrones y las soluciones que se pueden utilizar para realizar copias de seguridad de temas de MSK en S3, lo que permite a los clientes reducir la configuración de retención de datos a largo plazo en MSK. Algunos clientes almacenan datos a largo plazo en MSK para cargas de trabajo de análisis de datos y Machine Learning. Compartimos un patrón para simplificar esta arquitectura mediante la descarga de datos de temas en S3 y el uso de S3 para análisis y ML.

    Lea el blog 
    Formación
    Aspectos fundamentales sobre el análisis de datos

    En este curso autoguiado, aprenderá sobre el proceso que se sigue para planificar soluciones de análisis de datos y sobre los distintos procesos de análisis de datos que intervienen.

    Inscríbase ahora 
    Formación
    Laboratorios de Amazon MSK

    Este sitio contiene información y laboratorios prácticos relacionados con Amazon MSK. Estos laboratorios pueden funcionar con cuentas personales o corporativas de AWS o cuentas provistas por equipos de cuentas de AWS para eventos que usan Event Engine.

    Inscríbase ahora 
    Acerca de esta implementación
    Versión
    1.7.2
    Lanzamiento
    01/2023
    Autor
    AWS
    Tiempo de implementación estimado
    25-30 minutos
    Costo estimado
    Consulte los detalles
    Ver la guía de implementación
    Descargar guía de implementación  Código fuente  Plantilla de CloudFormation  Suscríbase a la fuente RSS 
    Opciones de despliegue
    ¿Listo para comenzar?
    Inicie esta solución en la consola de AWS para implementarla
    Lanzar en la consola de AWS
    ¿Le resultó útil esta solución de AWS?
    Sí
    No
    Comparta su opinión
  • Opción 3
  • La plantilla de AWS CloudFormation usa Amazon MSK, AWS Lambda y Amazon Kinesis Data Firehose
    Opción 3: plantilla de AWS CloudFormation mediante Amazon MSK, AWS Lambda y Amazon Kinesis Data Firehose

    Contenido relacionado

    Blog de arquitectura de AWS
    Copia de seguridad de Amazon MSK para archivar, reproducir o analizar

    Este artículo explica los patrones y las soluciones que se pueden utilizar para realizar copias de seguridad de temas de MSK en S3, lo que permite a los clientes reducir la configuración de retención de datos a largo plazo en MSK. Algunos clientes almacenan datos a largo plazo en MSK para cargas de trabajo de análisis de datos y Machine Learning. Compartimos un patrón para simplificar esta arquitectura mediante la descarga de datos de temas en S3 y el uso de S3 para análisis y ML.

    Lea el blog 
    Formación
    Aspectos fundamentales sobre el análisis de datos

    En este curso autoguiado, aprenderá sobre el proceso que se sigue para planificar soluciones de análisis de datos y sobre los distintos procesos de análisis de datos que intervienen.

    Inscríbase ahora 
    Formación
    Laboratorios de Amazon MSK

    Este sitio contiene información y laboratorios prácticos relacionados con Amazon MSK. Estos laboratorios pueden funcionar con cuentas personales o corporativas de AWS o cuentas provistas por equipos de cuentas de AWS para eventos que usan Event Engine.

    Inscríbase ahora 
    Acerca de esta implementación
    Versión
    1.7.2
    Lanzamiento
    01/2023
    Autor
    AWS
    Tiempo de implementación estimado
    25-30 minutos
    Costo estimado
    Consulte los detalles
    Ver la guía de implementación
    Descargar guía de implementación  Código fuente  Plantilla de CloudFormation  Suscríbase a la fuente RSS 
    Opciones de despliegue
    ¿Listo para comenzar?
    Inicie esta solución en la consola de AWS para implementarla
    Lanzar en la consola de AWS
    ¿Le resultó útil esta solución de AWS?
    Sí
    No
    Comparta su opinión
  • Opción 4
  • La plantilla de AWS CloudFormation que usa Amazon MSK, Amazon Kinesis Data Analytics y Amazon S3
    Opción 4: plantilla de AWS CloudFormation mediante Amazon MSK, Amazon Kinesis Data Analytics y Amazon S3

    Contenido relacionado

    Blog de arquitectura de AWS
    Copia de seguridad de Amazon MSK para archivar, reproducir o analizar

    Este artículo explica los patrones y las soluciones que se pueden utilizar para realizar copias de seguridad de temas de MSK en S3, lo que permite a los clientes reducir la configuración de retención de datos a largo plazo en MSK. Algunos clientes almacenan datos a largo plazo en MSK para cargas de trabajo de análisis de datos y Machine Learning. Compartimos un patrón para simplificar esta arquitectura mediante la descarga de datos de temas en S3 y el uso de S3 para análisis y ML.

    Lea el blog 
    Formación
    Aspectos fundamentales sobre el análisis de datos

    En este curso autoguiado, aprenderá sobre el proceso que se sigue para planificar soluciones de análisis de datos y sobre los distintos procesos de análisis de datos que intervienen.

    Inscríbase ahora 
    Formación
    Laboratorios de Amazon MSK

    Este sitio contiene información y laboratorios prácticos relacionados con Amazon MSK. Estos laboratorios pueden funcionar con cuentas personales o corporativas de AWS o cuentas provistas por equipos de cuentas de AWS para eventos que usan Event Engine.

    Inscríbase ahora 
    Acerca de esta implementación
    Versión
    1.7.2
    Lanzamiento
    01/2023
    Autor
    AWS
    Tiempo de implementación estimado
    25-30 minutos
    Costo estimado
    Consulte los detalles
    Ver la guía de implementación
    Descargar guía de implementación  Código fuente  Plantilla de CloudFormation  Suscríbase a la fuente RSS 
    Opciones de despliegue
    ¿Listo para comenzar?
    Inicie esta solución en la consola de AWS para implementarla
    Lanzar en la consola de AWS
    ¿Le resultó útil esta solución de AWS?
    Sí
    No
    Proporcione su opinión