Amazon CloudWatch GenAI Observability unterstützt jetzt Amazon AgentCore Evaluations
Amazon CloudWatch ermöglicht jetzt die automatische Qualitätsbewertung von KI-Agenten durch AgentCore Evaluations. Diese neue Funktion hilft Entwicklern dabei, die Leistung der Agenten auf der Grundlage realer Interaktionen kontinuierlich zu überwachen und zu verbessern, sodass Teams Qualitätsprobleme erkennen und beheben können, bevor sie sich auf Kunden auswirken.
AgentCore Evaluations verfügt über 13 vorgefertigte Evaluatoren, die wichtige Qualitätsdimensionen wie Hilfsbereitschaft, Werkzeugauswahl und Antwortgenauigkeit abdecken und gleichzeitig benutzerdefinierte modellbasierte Bewertungssysteme unterstützen. In CloudWatch-Dashboards können Sie auf einheitliche Qualitätsmetriken und Agententelemetrie zugreifen. Sie verfügen über umfassende Verfolgungsfunktionen, um Bewertungsmetriken mit Eingabeaufforderungen und Protokollen zu korrelieren. Die Funktion lässt sich nahtlos in die vorhandenen Funktionen von CloudWatch integrieren, darunter Anwendungssignale, Alarme, Schutz vertraulicher Daten und Logs Insights. Diese Funktion macht es für Teams überflüssig, eine benutzerdefinierte Evaluierungsinfrastruktur aufzubauen und zu verwalten, wodurch die Bereitstellung hochwertiger KI-Agenten beschleunigt wird. Entwickler können ihre gesamte Agentenflotte über den Abschnitt AgentCore in der CloudWatch GenAI Observability Console überwachen.
AgentCore Evaluations ist jetzt in den Regionen USA Ost (Nord-Virginia), USA West (Oregon), Europa (Frankfurt) und Asien-Pazifik (Sydney) verfügbar. Lesen Sie zunächst die Dokumentation und die Preisdetails. Die Standardpreise von CloudWatch gelten für die zugrunde liegenden Telemetriedaten.