Amazon MSK で Amazon Bedrock を使用したベクトル埋め込み生成のサポートを開始
Amazon MSK (Managed Streaming for Apache Kafka) で、Amazon Bedrock を使用してベクトル埋め込みを生成するための新しい Managed Streaming for Apache Flink ブループリントのサポートを開始しました。これより、最新のコンテキストデータを利用したリアルタイムの AI アプリケーションを簡単に構築できます。このブループリントを使用すると、Amazon MSK ストリーミングパイプラインの最新データを生成 AI モデルに組み込むプロセスを簡素化できます。リアルタイムのデータストリーム、ベクトルデータベース、大規模言語モデルを統合するためにカスタムコードを記述する必要はありません。
数回クリックするだけで、Bedrock の埋め込みモデルを使用してベクトル埋め込みを継続的に生成し、それらの埋め込みを Amazon MSK データストリーム用に Amazon OpenSearch でインデックス化するようにブループリントを設定できます。これにより、カスタムコードを記述しなくても、リアルタイムデータのコンテキストを Bedrock の強力な大規模言語モデルと組み合わせて、正確かつ最新の AI 応答を生成できます。さらに、オープンソースライブラリである LangChain のデータチャンク技術の組み込みサポートを使えば、データ取得の効率を向上させて、モデル取り込み時の質の高い入力をサポートできます。ブループリントは、MSK、選択した埋め込みモデル、Open Search ベクトルストア間でのデータの統合と処理を管理するため、お客様は基盤となる統合の管理ではなく、AI アプリケーションの構築に集中できます。
リアルタイムのベクトル埋め込みブループリントは、米国東部 (バージニア北部)、米国東部 (オハイオ)、米国西部 (オレゴン)、欧州 (パリ)、欧州 (ロンドン)、欧州 (アイルランド)、南米 (サンパウロ) の AWS リージョンで一般提供されています。今後数週間にわたってサポートされるその他のリージョンについては、Amazon MSK のドキュメントを参照してください。ブループリントを使用して Amazon MSK のデータからリアルタイムのベクトル埋め込みを生成する方法の詳細については、AWS ブログをご覧ください。