Tag: Amazon MSK

本篇博客介绍了亚马逊云科技 MSK 在生产中的可靠性最佳实践。Kafka 集群、生产者客户端，以及消费者客户端如何进行配置，以达到不同的保障性需求。

本文介绍了一种利用亚马逊云科技 Lambda 自动将 Kinesis Data Stream 中的数据导入到 Kafka 的方案。所有的应用无需修改，便能平滑迁移到亚马逊云科技上，同时运维人力成本也基本不会增加。

Kafka Connect 是一种在 Apache Kafka 和其他数据系统之间实现可靠地流式传输数据的工具。本文介绍了使用 Kafka Connect/亚马逊云科技 MSK Connect 通过简单配置构建数据流管道的架构设计，并对典型场景服务器日志采集入湖 S3 进行了示例讲解。

越来越多的亚马逊云科技客户正在将 Amazon MSK 与 Amazon DocumentDB 结合使用。本文讨论了如何运行和配置 MongoDB Kafka 连接器，以便在 Amazon DocumentDB 和 Amazon MSK 之间移动数据以用于接收器和来源使用案例。

如今，许多公司都在从中小型集中式 Apache Kafka 集群开始着手构建全球流式传输服务，随着时间的推移，他们会选择保留一个整体式集群。本文说明了集中式方法面临的一些挑战，并介绍了使用亚马逊云科技 Amazon MSK Serverless 实施去中心化方法的两种策略。

Appsync实现无服务器条件下的实时行情数据快速发布

本文手把手地介绍了如何配置Amazon MSK集群的Public Access选项，以及通过 SASL/SCRAM 身份验证的方式来安全地访问集群。Amazon MSK提供了三种可以公开访问集群的机制 – IAM 访问控制、SASL/SCRAM 以及 mTLS 身份验证，用户可以根据实际场景针对三种不同的认证方式进行选择并使用。

Amazon MSK提供了多种可以公开访问集群的机制，本文手把手地介绍了如何配置Amazon MSK集群的Public Access选项，以及通过 mTLS 身份验证的方式来安全地访问集群。

基于Nginx&Lua实现自建服务端埋点系统。

多库多表场景下使用Amazon EMR CDC实时入湖最佳实践