Amazon Bedrock 모델 평가, 이제 사용자 지정 모델 가져오기 모델 평가 지원
Amazon Bedrock의 모델 평가 기능을 활용하면 파운데이션 모델을 평가 및 비교한 후 사용 사례에 가장 적합한 모델을 선택할 수 있습니다. Amazon Bedrock에서는 자동 평가와 인적 평가 중 원하는 방식을 선택할 수 있습니다. 정확도, 강건성, 유해성 등의 지표에 대해 미리 정의된 알고리즘으로 자동 평가를 사용할 수 있습니다. 아울러 이러한 지표 또는 호감도, 스타일, 브랜드와의 통일성과 같은 주관적 지표나 사용자 지정 지표를 적용하려는 경우에는 클릭 몇 번으로 인적 평가 워크플로를 설정할 수 있습니다. 인적 평가 워크플로에서는 사내 직원이나 AWS 관리 팀을 검토자로 활용할 수 있습니다. 모델 평가 기능에서 기본 제공되는 엄선된 데이터 세트를 사용할 수도 있고 원하는 데이터 세트를 추가할 수도 있습니다.
이제 고객은 사용자 지정 모델 가져오기 기능을 통해 Amazon Bedrock으로 가져온 자체 모델을 평가할 수 있게 되었습니다. 이를 통해 고객은 기본 모델을 선택하고, 사용자 정의하고, 평가하고, 필요에 따라 다시 사용자 정의하거나 평가 결과에 만족하면 프로덕션으로 계속 진행하는 주기를 완료할 수 있습니다. 가져온 모델을 평가하려면 평가 작업을 생성할 때 모델 선택 도구의 평가할 모델 목록에서 사용자 지정 모델을 선택하기만 하면 됩니다.
Amazon Bedrock의 모델 평가는 현재 여러 상용 리전과 AWS GovCloud(미국 서부) 리전에서 정식 버전으로 제공됩니다.
Amazon Bedrock의 모델 평가 기능에 대해 자세히 알아보려면 Amazon Bedrock 개발자 경험 웹 페이지를 살펴보세요. 시작하려면 AWS Management Console에서 Amazon Bedrock에 로그인하거나 Amazon Bedrock API를 사용하세요.