Publié le: Nov 25, 2019
Vous pouvez désormais exécuter Apache Flink et Apache Kafka ensemble à l'aide de services entièrement gérés sur AWS. AWS fournit un service entièrement géré pour Apache Flink via Amazon Kinesis Data Analytics, vous permettant de créer rapidement et d'exécuter facilement des applications de streaming sophistiquées. Vous pouvez utiliser ces applications Apache Flink entièrement gérées pour traiter les données en streaming stockées sur Apache Kafka s'exécutant dans Amazon VPC ou sur Amazon MSK, un service Apache Kafka entièrement géré, hautement disponible et sécurisé.
Apache Flink est un framework distribué et un moteur permettant de traiter des flux de données. Grâce à Amazon Kinesis Data Analytics, les développeurs utilisent Apache Flink pour créer des applications de streaming permettant de transformer et d'analyser des données en temps réel.
Apache Kafka est une plateforme open source permettant de créer des pipelines et des applications de données en streaming en temps réel. Avec Amazon MSK, vous pouvez utiliser les API Apache Kafka pour renseigner des data lake, transmettre en continu les modifications apportées aux bases de données et alimenter des applications d'analyse et de machine learning.
Pour commencer à créer votre première application, allez sur l'AWS Management Console pour associer une application de streaming à votre cluster Amazon MSK en toute facilité. Vous pouvez apprendre à créer une application Apache Flink qui s'intègre à Amazon MSK dans le Guide du développeur Amazon Kinesis Data Analytics.
Pour obtenir la liste des régions où Amazon MSK et Amazon Kinesis Data Analytics sont disponibles, consultez le tableau des régions AWS. Cette intégration est disponible dans les régions USA Est (Virginie du Nord) et UE (Irlande). Elle sera bientôt disponible dans toutes les autres régions où Amazon Kinesis Data Analytics est disponible.