Amazon MSK unterstützt jetzt das Generieren von Vektoreinbettungen mit Amazon Bedrock
Amazon MSK (Managed Streaming for Apache Kafka) unterstützt ab sofort neue Blueprints für Managed Streaming für Apache Flink zum Generieren von Vektoreinbettungen mithilfe von Amazon Bedrock, wodurch die Erstellung von Echtzeit-KI-Anwendungen auf Basis aktueller, kontextbezogener Daten erleichtert wird.. Dieser Blueprint vereinfacht die Integration aktueller Daten aus Ihren Amazon MSK Streaming-Pipelines in Ihre generativen KI-Modelle, wodurch das Schreiben von benutzerdefiniertem Code für die Integration von Echtzeit-Datenströmen, Vektordatenbanken und großen Sprachmodellen überflüssig wird.
Mit wenigen Klicks können Kunden eine Konfiguration des Blueprints vornehmen, um mithilfe der Bedrock-Einbettungsmodelle kontinuierlich Vektoreinbettungen zu generieren und im Anschluss diese Einbettungen in Amazon OpenSearch für ihre Amazon MSK-Datenströme zu indizieren. Dies erlaubt es Kunden, Kontext aus Echtzeitdaten mit den leistungsstarken großen Sprachmodellen von Bedrock zu verbinden, ohne benutzerdefinierten Code für das Generieren präziser, aktueller KI-Antworten zu schreiben,. Kunden haben außerdem die Möglichkeit, die Effizienz des Datenabrufs mithilfe der integrierten Unterstützung für Data-Chunking-Techniken aus LangChain, einer Open-Source-Bibliothek, die hochwertige Eingaben für die Modellregistrierung unterstützt, zu verbessern. Der Blueprint verwaltet die Datenintegration und -verarbeitung zwischen MSK, dem ausgewählten Einbettungsmodell, und dem OpenSearchVektorStore, damit Kunden sich auf die Entwicklung ihrer KI-Anwendungen konzentrieren können, statt sich um die Verwaltung der zugrunde liegenden Integration kümmern zu müssen.
Der Blueprint zur Vektoreinbettung in Echtzeit ist in den AWS-Regionen USA Ost (Nord-Virginia), USA Ost (Ohio), USA West (Oregon), Europa (Paris), Europa (London), Europa (Irland) und Südamerika (Sao Paulo) allgemein verfügbar. Eine Liste weiterer Regionen, die in den nächsten Wochen unterstützt werden, finden Sie in der Amazon MSK-Dokumentation. Weitere Informationen dazu, wie Sie Blueprints verwenden, Vektoreinbettungen in Echtzeit aus Ihren Amazon MSK-Daten zu generieren, finden Sie im AWS-Blog.