Оценка моделей Amazon Bedrock теперь доступна в регионе AWS GovCloud (США – запад)
Оценка модели в Amazon Bedrock позволяет оценить, сравнить и выбрать наилучшую базовую модель для вашего варианта использования. В Amazon Bedrock можно выбрать автоматическую оценку и оценку с участием человека. Можно использовать автоматическую оценку с заранее заданными алгоритмами для показателей, таких как точность, надежность и токсичность. При оценке модели используются встроенные тщательно подобранные наборы данных. Вы также можете использовать собственные наборы данных.
Интерактивный интерфейс Amazon Bedrock поможет вам провести оценку модели. Вы просто выбираете автоматическую оценку, указываете тип задачи и показатели и загружаете набор данных текстового запроса. Затем Amazon Bedrock выполняет оценки и создает отчет, чтобы вы могли легко понять, как модель работает с выбранными метриками, и выбрать подходящие метрики для вашего сценария использования. Используя этот отчет в сочетании с метриками стоимости и задержки от Amazon Bedrock, вы можете выбрать модель с необходимым сочетанием показателей качества, стоимости и задержки.
Оценка моделей в Amazon Bedrock теперь общедоступна в регионе AWS GovCloud (США – запад), а также во многих коммерческих регионах.
Подробнее об оценке моделей в Amazon Bedrock см. на веб-странице, посвященной опыту разработчиков Amazon Bedrock. Чтобы начать работу, войдите в Amazon Bedrock в Консоли управления AWS или используйте API Amazon Bedrock.