Introducción a Amazon Kinesis Data Analytics

Código de muestra:

Puede empezar por descargar las bibliotecas de código abierto que incluyen el SDK de AWS, Apache Flink, y conectores para servicios de AWS. 

Puede escribir su código Java utilizando streaming de datos y operadores de secuencia. Las secuencias de datos de la aplicación son la estructura de datos con la que puede realizar el procesamiento en lugar de utilizar su código Java. Los datos fluyen de manera continua desde las fuentes hacia las secuencias de datos de aplicaciones. Uno o más operadores de secuencia están acostumbrados a definir su proceso en las secuencias de datos de aplicaciones.

Una vez finalizado el proceso de creación, debe cargar su código en Amazon Kinesis Data Analytics y el servicio se ocupa de todo lo necesario para ejecutar sus aplicaciones de funcionamiento en tiempo real de forma continua y ajusta la escala automáticamente para adaptarse al volumen y nivel de procesamiento de los datos de entrada.

La sección Introducción a Amazon Kinesis Data Analytics para aplicaciones Java de la Guía de desarrollador Java ofrece un recorrido simple que explica cómo crear su primera explicación.

Apache Flink ofrece varios ejemplos de procesamiento de transmisiones basadas en Java en su repositorio GitHub.

El video de formación de 15 minutos explica cómo puede usar las aplicaciones Java en Amazon Kinesis Data Analytics para obtener más información puntual a partir de sus datos.

Primero, vaya a la consola de Amazon Kinesis Data Analytics y seleccione una transmisión de datos de Kinesis o una transmisión de entrega de Kinesis Data Firehose como elemento de entrada. Amazon Kinesis Data Analytics incorpora los datos, reconoce automáticamente los formatos estándar y sugiere un esquema. Puede modificar el esquema o, si los datos de entrada no están estructurados, puede definir un esquema nuevo con el editor de esquemas intuitivo.

A continuación, escriba sus consultas en SQL para procesar los datos de streaming con el editor de SQL y las plantillas integradas de Amazon Kinesis Data Analytics, y pruébelas con datos de streaming en vivo.

Por último, apunte a los destinos donde quiere que se carguen los resultados. Amazon Kinesis Data Analytics se integra a la perfección con Amazon Kinesis Data Streams y Amazon Kinesis Data Firehose, por lo que resulta sencillo enviar resultados procesados a Amazon S3, Amazon Redshift, Amazon Elasticsearch Service o al destino que elija.

Esta guía para SQL Developer incluye información general acerca de la arquitectura de Amazon Kinesis Data Analytics, la creación de aplicaciones y la configuración de elementos de entrada y salida.

En la guía de introducción, se incluyen pasos para configurar una cuenta de AWS y la interfaz de línea de comandos (AWS CLI), y para crear una aplicación de Amazon Kinesis Data Analytics de principiante.

En la guía con aplicaciones de ejemplo se incluyen ejemplos de código e instrucciones paso a paso que lo ayudan a crear aplicaciones de Amazon Kinesis Data Analytics y a probar los resultados.