Solução de dados em streaming da AWS para Amazon Kinesis

A Solução de dados em streaming da AWS para Amazon Kinesis configura automaticamente os serviços da AWS necessários para capturar, armazenar, processar e entregar dados em streaming com facilidade. Essa solução ajuda a resolver casos de uso de streaming em tempo real, por exemplo, como captura de logs de aplicações de alto volume, análise de dados de clickstream, entrega contínua para um data lake e muito mais. Para fornecer flexibilidade para se adaptar a diferentes casos de uso e necessidades de negócios, essa solução oferece quatro modelos do AWS CloudFormation. Cada modelo permite combinar diferentes componentes e estendê-las para atender às suas necessidades. Você pode usar essa solução para testar novas combinações de serviços como base para seu ambiente de produção ou para melhorar aplicações existentes.

Esta solução reduz o tempo de desenvolvimento removendo ou reduzindo a necessidade de: modelar e provisionar recursos usando o AWS CloudFormation; configurar alarmes, painéis e registros do Amazon CloudWatch e implementar manualmente as melhores práticas de dados em streaming na AWS. Essa solução é independente de dados e lógica, permitindo que você comece com o código padronizado e inicie a personalização rapidamente. Após a implantação, você pode usar os recursos de monitoramento da solução para fazer a transição para produção facilmente.

A Solução de dados em streaming da AWS para Amazon Kinesis usa modelos em que os dados fluem por produtores, armazenamento de streaming, consumidores e destinos. Os produtores geram dados continuamente e os enviam para armazenamento de streaming, onde são capturados de forma duradoura e disponibilizados para processamento por um consumidor de dados. Os consumidores de dados processam os dados e, em seguida, os enviam para um destino.