Amazon MSK теперь поддерживает генерацию векторного встраивания с помощью Amazon Bedrock
Amazon MSK (Managed Streaming для Apache Kafka) теперь поддерживает новые чертежи Managed Streaming для Apache Flink, позволяющие создавать векторные встраивания с помощью Amazon Bedrock, что упрощает создание приложений искусственного интеллекта в реальном времени на основе актуальных контекстных данных. Этот чертеж упрощает процесс включения последних данных из ваших потоковых конвейеров Amazon MSK в модели генеративного искусственного интеллекта, устраняя необходимость написания специального кода для интеграции потоков данных в реальном времени, векторных баз данных и больших языковых моделей.
Всего несколькими щелчками мыши клиенты могут настроить схему на непрерывное создание векторных встраиваний с использованием моделей встраивания Bedrock, а затем индексировать эти вложения в Amazon OpenSearch для своих потоков данных Amazon MSK. Это позволяет клиентам комбинировать контекст из данных в реальном времени с мощными большими языковыми моделями Bedrock для получения точных и актуальных ответов ИИ без написания специального кода. Клиенты также могут повысить эффективность извлечения данных, используя встроенную поддержку методов разбиения на части данных из библиотеки LangChain с открытым исходным кодом, поддерживающей высококачественные входные данные для обработки моделей. Чертеж управляет интеграцией и обработкой данных между MSK, выбранной моделью встраивания и хранилищем векторных данных Open Search, что позволяет клиентам сосредоточиться на создании приложений искусственного интеллекта, а не на управлении базовой интеграцией.
Чертеж векторного встраивания в реальном времени обычно доступен в следующих регионах AWS: Восток США (Северная Вирджиния, Огайо), Запад США (Орегон), Европа (Париж, Лондон, Ирландия) и Южная Америка (Сан-Паулу). Список дополнительных регионов, которые будут поддерживаться в течение следующих нескольких недель, см. в документации по Amazon MSK. Чтобы узнать больше о том, как использовать чертеж для создания векторных встраиваний в реальном времени из данных Amazon MSK, читайте блог AWS.