发布于: Nov 9, 2023

AWS Lambda 针对作为事件源的 Amazon MSK 和自我管理 Apache Kafka 推出了自动扩缩改进。此次发布后,客户在使用 Lambda 函数处理 Kafka 消息时将体验到更快的扩缩速度和更一致的吞吐量。

对于需要可以在不影响其他工作负载的情况下横向扩展的 Kafka 使用者的 Lambda 客户来说,Kafka 事件源映射一直是最佳选择。但使用 Kafka 事件源映射的客户发现,事件源映射的扩展速度不够快,导致延迟增加且 OffsetLag 指标升高。这些问题在短时间内有大量消息到达的工作负载中尤为明显。我们最近推出的增强功能解决了这些问题,使 Kafka 事件源映射达到最大吞吐量的速度提高了一倍。这些变化将减少许多工作负载的处理延迟,其中最大的改进是在延迟敏感型工作负载中,这些工资负载中有大量以不规则的时间间隔到达的消息。

除中国(北京)、中国(宁夏)和 AWS GovCloud(美国)区域外,所有提供 AWS Lambda 和 Amazon MSK 的商业区域通常都已全面推出 Kafka 事件源映射自动扩缩改进功能。有关可用性的更多信息,请参阅 AWS 区域表

这些自动扩缩改进适用于新的和现有的 Kafka 事件源映射。请在 AWS 计算博客中查看这些改进的实际效果。有关更多详细信息,请参阅 MSK 事件源映射Apache Kafka 事件源映射文档。