Soluzione per i dati in streaming per Amazon MSK

Acquisisci continuamente i dati per l’elaborazione utilizzando un servizio di dati in streaming in tempo reale, durevole e scalabile.
Visualizza la guida all'implementazione

Panoramica

La soluzione per i dati in streaming per Amazon MSK consente di acquisire dati in streaming utilizzando Streaming gestito da Amazon per Apache Kafka (Amazon MSK), un servizio di archiviazione estremamente scalabile in grado di gestire elevati volumi di dati provenienti dai produttori di dati. Per producer si intendono migliaia di origini dati, ognuna delle quali genera continuamente dati in streaming, inviati, di solito, sotto forma di record di piccole dimensioni (kilobyte) in contemporanea.

I flussi di dati sono composti da svariati tipi di dati, ad esempio i file di log generati dai clienti che utilizzano applicazioni Web o su dispositivi mobili, acquisti effettuati su siti di e-commerce, eventi all'interno di videogiochi, informazioni provenienti da social network, dati di transazioni finanziarie, servizi di geolocalizzazione e di telemetria relativi a dispositivi connessi o strumentazioni in data center.

Questa soluzione AWS fornisce quattro modelli di AWS CloudFormation in cui i dati fluiscono attraverso producer, archiviazione di streaming, consumer e destinazioni. Analogamente alla soluzione di dati in streaming per Amazon Kinesis, i modelli vengono configurati per applicare le best practice alla funzionalità di monitoraggio e proteggere i dati tramite allarmi e pannelli di controllo.

Casi d'uso per questa soluzione AWS

Vantaggi

Configurazione automatizzata
Configura automaticamente i servizi AWS necessari per facilitare l'acquisizione, l'archiviazione, l'elaborazione e la distribuzione di dati in streaming.
Quattro opzioni di modelli
Scegli fra quattro opzioni di modelli AWS CloudFormation. Prova nuove combinazioni di servizi per l'ambiente di produzione e migliora le applicazioni esistenti.
Casi d'uso in tempo reale
Acquisisci log di applicazioni a volume elevato, analizza i dati clickstream, distribuisci continuamente a un data lake e molto altro.
Codice di origine personalizzabile
Personalizza il codice boilerplate della soluzione e utilizza le capacità di monitoraggio per eseguire una transazione rapida dalla verifica alla produzione.

Dettagli tecnici

Questa architettura può essere implementata automaticamente consultando la Guida all'implementazione e il modello AWS CloudFormation allegato.

Contenuto correlato

Blog sull'architettura di AWS
Amazon MSK Backup for Archival, Replay or Analytics

Questo post tratta i modelli e le soluzioni che possono essere utilizzati per supportare argomenti MSK in S3, che consente ai clienti di ridurre le impostazioni della retention dei dati a lungo termine in MSK. Alcuni clienti archiviano dati a lungo termine in MSK ai fini di analisi dei dati e dei carichi di lavoro del machine learning. Condividiamo un modello per semplificare questa architettura mediante la ripartizione dei dati degli argomenti in S3 e utilizziamo S3 per l'analisi o il ML.

Leggi il blog 
Formazione
Data Analytics Fundamentals (Nozioni di base sull'analisi di dati)

In questo corso gestito dall'utente illustriamo il processo delle soluzioni di analisi dei dati di pianificazione e i vari processi di analisi dei dati interessati.

Iscriviti ora 

Questa pagina è stata utile?

 Feedback