Amazon Redshift presenta la optimización clave del rendimiento para las consultas Top-K
Amazon Redshift optimiza aún más el procesamiento de las consultas Top-K (consultas con cláusulas ORDER BY y LIMIT) al omitir de forma inteligente los bloques de datos irrelevantes para obtener resultados más rápido, lo que reduce considerablemente la cantidad de datos procesados. Esta optimización reordena y ajusta de manera eficiente los bloques de datos que se deben leer en función de los valores mínimos y máximos de la columna ORDER BY, manteniendo en memoria únicamente las filas K más relevantes. Cuando la columna ORDER BY está ordenada total o parcialmente, Amazon Redshift procesa solo los bloques de datos mínimos necesarios en lugar de escanear tablas enteras; de esta manera, se evita la sobrecarga de computación y de E/S innecesaria.
Esta mejora beneficia especialmente a las consultas Top-K cuando los datos se almacenan permanentemente en orden descendente (ORDER BY... DESC LIMIT K) en tablas grandes, donde las filas que cumplen con los criterios se agregan al final del almacenamiento de datos. Algunos ejemplos comunes son:
- Buscar los pedidos K más recientes de millones o miles de millones de transacciones
- Recuperar los productos con mejor rendimiento de consultas Top-K o los productos K con peor rendimiento (los Top-K en orden descendente) de su catálogo de ventas, que contiene cientos de miles de unidades de mantenimiento de stock (SKU) y millones o miles de millones de transacciones de venta asociadas a todos los SKU de productos de su catálogo de ventas
- Buscar las peticiones Top-K más recientes o las más antiguas (las Top-K en orden descendente) inferidas por un modelo fundacional de lenguaje de gran tamaño (LLM) a partir de miles de millones de peticiones.
Con esta nueva optimización, el rendimiento de las consultas Top-K mejora considerablemente. Esta optimización para las consultas Top-K ya está disponible en Amazon Redshift sin costo adicional a partir de la versión del parche P199 en todas las regiones de AWS en las que Amazon Redshift está disponible. Esta optimización se aplica automáticamente a las consultas que cumplen los requisitos sin necesidad de reescribir las consultas ni cambiar la configuración.