Observabilidade de GenAI do Amazon CloudWatch agora oferece as Avaliações do Amazon AgentCore
Agora, o Amazon CloudWatch oferece a avaliação automatizada da qualidade dos agentes de IA usando as Avaliações do AgentCore. Esse novo recurso ajuda os desenvolvedores a monitorar e aprimorar continuamente a performance dos agentes de acordo com as interações do mundo real. Dessa forma, as equipes podem identificar e resolver problemas de qualidade antes que eles afetem os clientes.
As Avaliações do AgentCore são oferecidas com 13 avaliadores incorporados que abrangem dimensões essenciais de qualidade, como utilidade, seleção de ferramentas e precisão das respostas, além serem compatíveis com sistemas de pontuação baseados em modelos personalizados. Você pode acessar métricas de qualidade e telemetria de agentes unificadas nos painéis do CloudWatch, com recursos de rastreamento de ponta a ponta para correlacionar métricas de avaliação com solicitações e logs. O recurso se integra perfeitamente aos recursos existentes do CloudWatch, incluindo Application Signals, Alarmes, Proteção de dados confidenciais e Logs Insights. Com esse recurso, as equipes não precisam mais criar e manter uma infraestrutura de avaliação personalizada, acelerando assim a implantação de agentes de IA de alta qualidade. Os desenvolvedores podem monitorar toda a frota de agentes na seção do AgentCore no console de observabilidade de GenAI do CloudWatch.
As Avaliações do AgentCore já estão disponíveis nas regiões Leste dos EUA (Ohio), Leste dos EUA (Norte da Virgínia), Oeste dos EUA (Oregon), Europa (Frankfurt) e Ásia-Pacífico (Sydney). Para começar a usar, acesse a documentação e os detalhes de preços. Os preços padrão do CloudWatch se aplicam aos dados de telemetria associados.