Was macht diese AWS-Lösung?
Die Streaming-Daten-Lösung für Amazon MSK nutzt AWS-CloudFormation-Vorlagen, bei denen Daten durch Produzenten, Streaming-Speicher, Konsumenten und Ziele fließen. Um mehrere Anwendungsfälle und Geschäftsanforderungen zu unterstützen, bietet diese Lösung vier AWS-CloudFormation-Vorlagen. Ähnlich wie bei der Streaming-Daten-Lösung für Amazon Kinesis werden die Vorlagen so konfiguriert, dass bewährte Methoden zur Überwachung der Funktionalität mithilfe von Dashboards und Alarmen sowie zur Sicherung der Daten angewendet werden.
Vorteile
AWS-Lösungsübersicht
-
Option 1
-
Option 2
-
Option 3
-
Option 4
-
Option 1
-
AWS-CloudFormation-Vorlage mit Amazon Managed Streaming für Apache Kafka (Amazon MSK)
Zum Vergrößern anklicken
Streaming Data Lösung für Amazon MSK Architektur
Option 1 – AWS-CloudFormation-Vorlage mit Amazon MSK
Diese AWS-CloudFormation-Vorlage stellt die folgende Architektur zur Verfügung:
- Ein Amazon-MSK-Cluster.
- Eine Amazon EC2-Instance, die die Apache-Kafka-Client-Bibliotheken, die für die Kommunikation mit dem Amazon-MSK-Cluster erforderlich sind, enthält. Dieser Client-Computer befindet sich in derselben VPC wie der Cluster und kann über AWS Systems Manager Session Manager erreicht werden.
Streaming-Daten-Lösung für Amazon MSK
Geschätzte Kosten Quellcode Option 1: AWS-CloudFormation-Vorlage mit Amazon MSKVersion 1.7.0
Veröffentlichungsdatum: 11.2022
Autor: AWS
Geschätzte Bereitstellungszeit: 25 – 30 Min.
Verwenden Sie die Schaltfläche unten, um Lösungsaktualisierungen zu abonnieren.Hinweis: Um RSS-Aktualisierungen zu abonnieren, muss für den von Ihnen verwendeten Browser ein RSS-Plug-in aktiviert sein.
-
Option 2
-
AWS-CloudFormation-Vorlage mit Amazon MSK und AWS Lambda
Zum Vergrößern anklicken
Streaming Data Lösung für Amazon MSK Architektur
Option 2 – AWS-CloudFormation-Vorlage, die Amazon MSK und AWS Lambda einsetzt
Diese AWS-CloudFormation-Vorlage stellt eine Referenzarchitektur bereit, die Folgendes umfasst:
- Eine Lambda-Funktion, die Datensätze in einem Apache-Kafka-Thema verarbeitet. Bei der Standardfunktion handelt es sich um eine Node.js-Anwendung, die die empfangenen Nachrichten protokolliert. Dies kann jedoch an Ihre geschäftlichen Anforderungen angepasst werden.
Streaming-Daten-Lösung für Amazon MSK
Geschätzter Preis Quellcode Option 2: AWS-CloudFormation-Vorlage, die Amazon MSK und AWS Lambda einsetztVersion 1.7.0
Veröffentlichungsdatum: 11.2022
Autor: AWS
Geschätzte Bereitstellungszeit: 5 Minuten
Verwenden Sie die Schaltfläche unten, um Lösungsaktualisierungen zu abonnieren.Hinweis: Um RSS-Aktualisierungen zu abonnieren, muss für den von Ihnen verwendeten Browser ein RSS-Plug-in aktiviert sein.
- Eine Lambda-Funktion, die Datensätze in einem Apache-Kafka-Thema verarbeitet. Bei der Standardfunktion handelt es sich um eine Node.js-Anwendung, die die empfangenen Nachrichten protokolliert. Dies kann jedoch an Ihre geschäftlichen Anforderungen angepasst werden.
-
Option 3
-
AWS-CloudFormation-Vorlage mit Amazon MSK, AWS Lambda und Amazon Kinesis Data Firehose
Zum Vergrößern anklicken
Streaming Data Lösung für Amazon MSK Architektur
Option 3 – AWS-CloudFormation-Vorlage mit Amazon MSK, AWS Lambda und Amazon Kinesis Data Firehose
Diese AWS-CloudFormation-Vorlage stellt eine Referenzarchitektur bereit, die Folgendes umfasst:
- Eine AWS-Lambda-Funktion, die Datensätze in einem Apache-Kafka-Thema verarbeitet.
- Ein Amazon-Kinesis-Data-Firehose-Bereitstellungs-Stream, der Daten puffert, bevor sie an den Bestimmungsort geliefert werden.
- Ein Amazon-Simple-Storage-Service-Bucket (Amazon S3), der alle Original-Ereignisse aus dem Amazon-MSK-Cluster speichert.
Streaming-Daten-Lösung für Amazon MSK
Geschätzter Preis Quellcode Option 3: AWS-CloudFormation-Vorlage mit Amazon MSK, AWS Lambda und Amazon Kinesis Data FirehoseVersion 1.7.0
Veröffentlichungsdatum: 11.2022
Autor: AWS
Geschätzte Bereitstellungszeit: 10 Minuten
Verwenden Sie die Schaltfläche unten, um Lösungsaktualisierungen zu abonnieren.Hinweis: Um RSS-Aktualisierungen zu abonnieren, muss für den von Ihnen verwendeten Browser ein RSS-Plug-in aktiviert sein.
- Eine AWS-Lambda-Funktion, die Datensätze in einem Apache-Kafka-Thema verarbeitet.
-
Option 4
-
AWS-CloudFormation-Vorlage mit Amazon MSK, Amazon Kinesis Data Analytics und Amazon S3
Zum Vergrößern anklicken
Streaming Data Lösung für Amazon MSK Architektur
Option 4 – AWS-CloudFormation-Vorlage mit Amazon MSK, Amazon Kinesis Data Analytics und Amazon S3
Mit dieser AWS-CloudFormation-Vorlage wird eine Referenzarchitektur bereitgestellt, die auch Folgendes umfasst:
- Ein Kinesis-Data-Analytics-Studio-Notizbuch, das Ereignisse aus einem vorhandenen Thema in einem Amazon-MSK-Cluster liest.
- Ein Amazon Simple Storage Service (Amazon S3)-Bucket, in dem die Ausgabe gespeichert wird.
Streaming-Daten-Lösung für Amazon MSK
Geschätzter Preis Quellcode Option 4: AWS-CloudFormation-Vorlage mit Amazon MSK, Amazon Kinesis Data Analytics und Amazon S3Version 1.7.0
Veröffentlichungsdatum: 11.2022
Autor: AWS
Geschätzte Bereitstellungszeit: 10 Minuten
Verwenden Sie die Schaltfläche unten, um Lösungsaktualisierungen zu abonnieren.Hinweis: Um RSS-Aktualisierungen zu abonnieren, muss für den von Ihnen verwendeten Browser ein RSS-Plug-in aktiviert sein.
- Ein Kinesis-Data-Analytics-Studio-Notizbuch, das Ereignisse aus einem vorhandenen Thema in einem Amazon-MSK-Cluster liest.
Zugehöriger Inhalt
Durchsuchen Sie unsere Bibliothek der AWS-Lösungen, um Antworten auf häufige Architekturprobleme zu erhalten.
Finden Sie AWS-Partner, die Ihnen den Einstieg erleichtern.
Präskriptive Architekturdiagramme, Beispielcode und technische Inhalte für häufig vorkommende Anwendungsfälle finden.