Консоль наблюдаемости GenAI в Amazon CloudWatch теперь поддерживает Оценки Amazon AgentCore
Amazon CloudWatch теперь поддерживает автоматическую оценку качества агентов искусственного интеллекта (ИИ) с помощью Оценок AgentCore. Эта новая возможность помогает разработчикам непрерывно отслеживать и улучшать работу агентов на основе реальных взаимодействий, позволяя специалистам выявлять и устранять проблемы с качеством до того, как они затронут клиентов.
Оценки AgentCore поставляется с 13 встроенными средствами оценок, охватывающими такие важные аспекты качества, как полезность, выбор инструментов и точность ответов, а также поддерживающими настраиваемые системы оценки на основе моделей. В панелях CloudWatch доступны объединенные метрики качества и данные телеметрии по агентам, а также возможности комплексной трассировки для сопоставления метрик с запросами и журналами. Эта функция полностью интегрируется с уже существующими возможностями CloudWatch, такими как Отслеживание состояния приложений, Предупреждения, Защита конфиденциальных данных и Аналитика журналов. Данная возможность избавляет специалистов от необходимости создавать и поддерживать собственную инфраструктуру оценки, что ускоряет развертывание агентов ИИ высокого качества. Разработчики могут отслеживать весь свой парк агентов через раздел AgentCore из консоли наблюдаемости GenAI в CloudWatch.
Оценки AgentCore доступны в следующих регионах: Восток США (Северная Вирджиния), Запад США (Орегон), Европа (Франкфурт) и Азиатско-Тихоокеанский регион (Сидней). Для начала ознакомьтесь с документацией и сведениями о ценах. Для используемых данных телеметрии действуют стандартные цены CloudWatch.