Las comprobaciones de razonamiento automatizado ahora incluyen la generación de preguntas y respuestas para pruebas de lenguaje natural
AWS anuncia el lanzamiento de una generación de preguntas y respuestas sobre pruebas de lenguaje natural para las comprobaciones de razonamiento automatizado en las barreras de protección de Amazon Bedrock. Las comprobaciones de razonamiento automatizado utilizan técnicas de verificación formales para validar la precisión y el cumplimiento de las políticas de los resultados de los modelos de IA generativa. Las comprobaciones del razonamiento automatizado ofrecen una precisión de hasta el 99 % a la hora de detectar las respuestas correctas de los LLM. Esto le da una seguridad demostrable a la hora de detectar las alucinaciones de la IA y, además, ayuda a detectar ambigüedades en las respuestas de los modelos.
Para comenzar con las comprobaciones de razonamiento automatizado, los clientes crean y prueban políticas de razonamiento automatizado utilizando documentos en lenguaje natural y ejemplos de preguntas y respuestas. Las comprobaciones de razonamiento automatizado generan hasta N preguntas y respuestas de prueba para cada política utilizando el contenido del documento de entrada, lo que reduce el trabajo necesario para pasar de la generación inicial de la política a una política refinada y lista para la producción.
La generación de pruebas para las comprobaciones de razonamiento automatizado ya está disponible en las regiones de AWS este de EE. UU. (Virginia), este de EE. UU. (Ohio) Europa (Fráncfort), Europa (Irlanda) y Europa (París). Los clientes pueden acceder al servicio a través de la consola de Amazon Bedrock, así como del SDK de Python para Amazon Bedrock.
Para obtener más información sobre las comprobaciones de razonamiento automatizado y cómo puede integrarlas en sus flujos de trabajo de IA generativa, lea la documentación de Amazon Bedrock, consulte los tutoriales del blog de IA de AWS y visite la página web de las barreras de protección de Bedrock.