Les courtiers Amazon MSK Express fournissent désormais des données Apache Kafka à Amazon S3
Les courtiers Amazon MSK Express fournissent désormais des données vers des compartiments à usage général Amazon S3, fournissant ainsi une capacité entièrement gérée permettant de fournir des données Apache Kafka dans Amazon S3 pour un traitement en aval de la manière la plus simple et la plus fiable. Cette fonctionnalité s’adapte automatiquement pour fournir des données Kafka à haut débit à S3 avec une fiabilité de bout en bout pour les charges de travail critiques, tout en réduisant les coûts d’ingestion et de diffusion jusqu’à 60 % par rapport aux alternatives autogérées.
Les clients fournissent des données Apache Kafka à Amazon S3 pour des cas d’utilisation tels que l’archivage des journaux, la conservation de la conformité, la relecture de Kafka et la formation de modèles d’IA/ML, et créent généralement ces pipelines avec des connecteurs autogérés qui deviennent coûteux et complexes sur le plan opérationnel à mesure que les charges de travail évoluent, obligeant les équipes à créer ou à se procurer des plug-ins de connecteur S3, à obtenir des approbations pour les déployer, à faire évoluer continuellement la capacité et à appliquer des mises à jour de sécurité à l’ensemble du parc de connecteurs. Grâce à cette fonctionnalité, MSK Express gère automatiquement la mise à l’échelle, les nouvelles tentatives et la contre-pression, de sorte que les clients ne gèrent plus leurs parcs de connecteurs ni ne coordonnent leurs équipes. MSK Express prend en charge un débit allant jusqu’à 10 Gbit/s pour la diffusion de données vers Amazon S3, et gère les opérations de routine telles que la mise à niveau des capacités et les mises à niveau de version sans introduire d’interruptions de livraison. En outre, les clients ajoutent cette capacité de distribution sans provisionner de débit de sortie supplémentaire pour les courtiers, ce qui élimine les coûts d’infrastructure supplémentaires liés à la mise à l’échelle des pipelines basés sur des connecteurs. Les clients adaptent donc la distribution en fonction de la demande de charge de travail réelle plutôt que de le provisionner en cas de période de pointe, garantissant ainsi une transmission fiable et haut débit vers Amazon S3 tout en supprimant les frais d’exploitation et en abaissant les coûts.
La transmission de données Amazon MSK vers Amazon S3 est disponible dès aujourd’hui dans toutes les Régions AWS où les courtiers Amazon MSK Express sont proposés. Pour en savoir plus sur les tarifs, consultez la page de tarification. Pour en savoir plus, consultez le Guide du développeur d’Amazon MSK et les compétences Amazon MSK AI.