Amazon Bedrock AgentCore lancia in anteprima le funzionalità per l'ottimizzazione delle prestazioni degli agenti
Amazon Bedrock AgentCore introduce le raccomandazioni e due modalità per convalidare le prestazioni: valutazioni batch e test A/B. Questo completa il ciclo osserva, valuta, migliora per gli agenti IA in produzione. Fino ad ora, tradurre gli esiti delle valutazioni in miglioramenti concreti e convalidati richiedeva l'intervento manuale degli sviluppatori e l'intuizione, anziché un approccio sistematico. Con le raccomandazioni, le valutazioni batch e i test A/B, gli sviluppatori dispongono ora degli strumenti necessari per agire sugli esiti delle valutazioni.
Con l'evoluzione dei modelli e il cambiamento del comportamento degli utenti, la qualità degli agenti degrada silenziosamente nel tempo. La funzionalità di raccomandazione analizza le tracce di produzione e gli output delle valutazioni generati da AgentCore per creare prompt di sistema ottimizzati e descrizioni degli strumenti su misura per il carico di lavoro specifico. Le valutazioni batch vengono poi utilizzate per convalidare le raccomandazioni rispetto a casi di test predefiniti. I test A/B convalidano ulteriormente tali raccomandazioni tramite test A/B controllati su set di test predefiniti o sul traffico di produzione reale, con la significatività statistica riportata prima che qualsiasi modifica venga messa in produzione. Ogni raccomandazione richiede la tua approvazione prima di essere messa in produzione. Nell'insieme, queste funzionalità completano il ciclo di miglioramento delle prestazioni per gli agenti. Gli agenti non si limitano a funzionare: migliorano, alle tue condizioni.
È possibile utilizzare le funzionalità di ottimizzazione in tutte le regioni AWS in cui è disponibile AgentCore Evaluations. Per ulteriori informazioni, consulta la documentazione di AgentCore.