В Amazon S3 Vectors реализована предварительная фильтрация метаданных, позволяющая повысить максимум в 5 раз полноту результатов при отфильтрованном поиске
Amazon S3 Vectors теперь поддерживает предварительную фильтрацию, которая оценивает фильтры метаданных перед запуском поиска сходства, возвращая максимум в 5 раз больше совпадающих векторов, когда фильтр является выборочным. В S3 Vectors также добавлен оператор сопоставления префиксов ($startsWith) для фильтрации таких значений, как пути и URL-адреса. В совокупности эти улучшения позволяют приложениям генерации с расширенным извлечением (RAG), агентным и семантическим поиском получать более полные результаты при фильтрации, поэтому ваши приложения возвращают более релевантные ответы.
S3 Vectors предоставляет встроенную поддержку хранения векторов и запросов к ним в Amazon S3, предоставляя специализированное и экономичное векторное хранилище и запросы в масштабе миллиардов векторов. После этого обновления индексы в новых векторных бакетах по умолчанию используют предварительную фильтрацию метаданных без изменения способа записи векторов с помощью PutVectors или выполнения отфильтрованных запросов с помощью QueryVectors. Чтобы использовать предварительную фильтрацию существующего индекса, обновите его на месте с помощью API UpdateIndexMode. Перед обновлением можно также сравнить предварительную фильтрацию с текущей фильтрацией по тому же индексу, используя параметр для каждого запроса в QueryVectors.
Предварительная фильтрация метаданных доступна без дополнительной платы во всех коммерческих регионах AWS, в которых предлагается Amazon S3 Vectors, а также в регионах AWS в Китае. На данный момент изменение находится на этапе развертывания, который планируется завершить в ближайшие дни. Для начала работы используйте интерфейс командной строки AWS, пакет SDK AWS или консоль Amazon S3. Чтобы узнать больше, ознакомьтесь с документацией по Amazon S3 Vectors и новостным блогом AWS.