Amazon MSK 现在支持使用 Amazon Bedrock 生成向量嵌入

发布于: 2024年11月6日

Amazon MSK (Managed Streaming for Apache Kafka) 现在支持全新的 Managed Streaming for Apache Flink 蓝图,使用 Amazon Bedrock 生成向量嵌入,从而更轻松地构建由最新上下文数据支持的实时 AI 应用程序。该蓝图简化了将 Amazon MSK 流传输管道中的最新数据整合到生成式 AI 模型的过程,无需编写自定义代码来集成实时数据流、向量数据库和大型语言模型。

只需点击几下,客户就可以将蓝图配置为使用 Bedrock 的嵌入模型持续生成向量嵌入,然后在 Amazon OpenSearch 中为其 Amazon MSK 数据流索引这些嵌入。这使客户能够将实时数据中的上下文与 Bedrock 强大的大型语言模型相结合,无需编写自定义代码即可生成准确、最新的 AI 响应。客户还可以选择使用开源库 LangChain 对数据分块技术的内置支持来提高数据检索的效率,从而支持模型摄取的高质量输入。该蓝图管理 MSK、所选嵌入模型和 Open Search 向量存储之间的数据集成和处理,使客户能够专注于构建 AI 应用程序,而不是管理底层集成。

实时向量嵌入蓝图在以下 AWS 区域全面推出:美国东部(弗吉尼亚州北部)、美国东部(俄亥俄州)、美国西部(俄勒冈州)、欧洲地区(巴黎)、欧洲地区(伦敦)、欧洲地区(爱尔兰)和南美洲(圣保罗)。请访问 Amazon MSK 文档,查看其他区域的列表,这些区域将在接下来的几周内得到支持。要详细了解如何使用蓝图从 Amazon MSK 数据生成实时向量嵌入,请访问 AWS Blog