Recursos e perguntas frequentes

P: O que é um produtor de dados em streaming?

R: Um produtor pode ser milhares de fontes de dados, cada uma gerando dados em streaming continuamente e que, normalmente, enviam registros simultaneamente e em tamanhos pequenos (kilobytes). Os dados em streaming incluem uma ampla variedade de dados, como arquivos de log gerados por clientes usando aplicativos móveis ou da web, compras de e-commerce, atividade de jogador durante o jogo, informações de redes sociais, pregões financeiros ou serviços geoespaciais, como também telemetria de serviços conectados ou instrumentação em datacenters. Esses produtores de dados geram dados usando vários padrões de ingestão para garantir a captura de dados duradoura e confiável em tempo real.

P: O que é um consumidor de dados de transmissão?

R: O armazenamento de dados de transmissão permite o processamento de dados em tempo real pelos consumidores de dados. Os consumidores processam os dados de forma sequencial e incremental, seja registro por registro ou em janelas de tempo deslizantes. Os dados são usados para uma ampla variedade de análises, incluindo correlações, agregações, filtragem e amostragem. As informações derivadas dessas análises fornecem às empresas visibilidade de muitos negócios e atividades dos clientes, como uso de serviços (para medição/faturamento), atividades de servidores, cliques em sites e geolocalização de dispositivos, além de pessoas e bens físicos. Situações emergentes podem ser tratadas prontamente.

P: O que é um destino de dados em streaming?

R: Os dados em streaming são continuamente processados por um consumidor de dados. Em seguida, os dados processados são enviados para um ou mais destinos. Esses destinos podem servir como destino final de armazenamento ou podem ser usados para vincular casos de uso de dados em streaming.

P: O que é o Amazon MSK?

R: Para obter mais informações sobre o Amazon MSK, consulte as Perguntas frequentes do Amazon MSK.

P: Onde posso encontrar o código-fonte dessa solução?

R: Visite nosso Repositório GitHub para fazer download dos modelos e scripts dessa solução e para compartilhar suas personalizações com outros usuários.

P: Essa solução usa o AWS CDK?

R: Sim, os modelos do AWS CloudFormation dessa solução são construídos usando o AWS Cloud Development Kit (AWS CDK). O AWS CDK é uma estrutura de desenvolvimento de software de código aberto para modelar e provisionar recursos de aplicativos de nuvem usando linguagens de programação conhecidas. O AWS CDK acelera seu processo de desenvolvimento, fornecendo o poder expressivo das linguagens de programação para definir a infraestrutura.

P: Como personalizar a solução?

R: Esta solução expõe as configurações essenciais para cada recurso da AWS que é definido durante a implantação. Após a criação, você pode atualizar configurações adicionais diretamente no modelo do AWS CloudFormation ou por meio do AWS CDK.

P: Onde posso encontrar recursos de aprendizagem para o Amazon MSK?

R: Os laboratórios do Amazon MSK são recursos de aprendizagem que orientam você nos primeiros passos,
um exemplo de caso de uso de consumo e análise de dados de sequência de cliques em tempo real e práticas
recomendadas para migrar seu cluster do Apache Kafka autogerenciado para o Amazon MSK.
Eles também mostram como aproveitar os recursos avançados do Amazon MSK (como Cruise
Control, autenticação TLS mútua e monitoramento aberto), que podem ser aplicados a
clusters criados com a solução.

P: Posso implantar essa solução em qualquer região da AWS?

R: Essa solução usa o Amazon Managed Streaming for Apache Kafka (Amazon MSK), que não está disponível atualmente em todas as Regiões da AWS. Portanto, você deve executar essa solução em uma região da AWS na qual esse serviço esteja disponível. Para conhecer a disponibilidade de serviços mais atual por região, consulte a Lista de serviços regionais da AWS.