Publicado en: Nov 22, 2023
OpenSearch Service 2.11 ahora incluye OpenSearch Neural Sparse Retrieval. Los profesionales de la búsqueda ahora tienen un método de búsqueda adicional para usar en sus aplicaciones de búsqueda con una comprensión semántica mejorada, al tiempo que mantienen bajos los costos computacionales y la latencia computacional, más en línea con la búsqueda léxica.
Neural Sparse Retrieval es un nuevo tipo de método de incrustación dispersa, similar en muchos aspectos a la indexación clásica basada en términos, pero con una mejor comprensión de las palabras y frases de baja frecuencia. Neural Sparse Retrieval utiliza modelos basados en transformadores (por ejemplo, GPT o BERT) para crear incrustaciones ricas en información que resuelvan el desafío léxico de la falta de coincidencia de vocabulario de una manera escalable. Esta nueva funcionalidad de recuperación dispersa con OpenSearch Service ofrece el modo de solo documento y el modo de doble codificador, cada uno con diferentes ventajas. El modo de solo documento puede ofrecer un rendimiento de baja latencia más comparable al de la búsqueda léxica, con limitaciones de sintaxis avanzada en comparación con los métodos densos. El modo de doble codificador maximiza la relevancia de la búsqueda y, al mismo tiempo, funciona con una latencia más alta. Con esta actualización, los usuarios ahora pueden elegir el método que mejor se adapte a sus requisitos de rendimiento, precisión y costo.
Neural Sparse Retrieval ya está disponible en todas las regiones de AWS en las que está disponible Amazon OpenSearch Service. En la documentación podrá obtener información sobre la actualización a OpenSearch 2.11.
Para conocer más acerca de Amazon OpenSearch Service, visite la página del producto.