Amazon Bedrock, 이제 강화 미세 조정 기능을 지원하여 기본 모델에 비해 평균 66% 향상된 정확도 제공
이제 Amazon Bedrock에서 강화 미세 조정이 지원됨에 따라 심층적인 기계 학습 전문 지식이나 대량의 레이블이 지정된 테이블 없이도 모델 정확도를 개선할 수 있게 되었습니다. Amazon Bedrock은 강화 미세 조정 워크플로를 자동화하여 일반 개발자가 이러한 고급 모델 사용자 지정 기법을 이용할 수 있도록 합니다. 모델은 기존의 미세 조정 방법에 필요한 대량의 데이터 대신 작은 프롬프트 세트를 사용하여 특정 요구 사항에 맞추는 방법을 학습하므로 팀이 빠르게 시작할 수 있습니다. 이 기능은 동일한 프롬프트에 대해 여러 가지 가능한 응답에 대한 피드백을 통해 모델을 학습하여 무엇이 좋은 응답을 만드는지에 대한 판단력을 높입니다. Amazon Bedrock의 강화 미세 조정은 기본 모델에 비해 평균 66% 향상된 정확도를 제공하므로 고품질을 유지하는 동시에 더 작고 빠르며 비용 효율적인 모델 변형을 사용할 수 있습니다.
조직은 AI 모델을 고유한 비즈니스 요구 사항에 맞게 조정하는 데 어려움을 겪기 때문에 평균 성능을 갖춘 일반 모델이나 전문 인재, 인프라 및 위험한 데이터 이동이 필요한 비싸고 복잡한 사용자 지정 중에서 선택해야 합니다. Amazon Bedrock의 강화 미세 조정은 고급 모델 사용자 지정을 빠르고 자동화하며 안전하게 만들어 이러한 복잡성을 없애줍니다. 컴퓨터에서 직접 훈련 데이터를 업로드하거나 Amazon S3에 이미 저장되어 있는 데이터세트에서 선택하여 모델을 훈련할 수 있으므로 레이블이 지정된 데이터세트가 필요하지 않습니다. 검증 가능한 규칙 기반 선별기 또는 AI 기반 심사자를 내장된 템플릿과 함께 사용하여 보상 함수를 정의함으로써 코드 생성 또는 수학 추론과 같은 객관적 작업과 지침 따르기 또는 챗봇 상호 작용과 같은 주관적 작업 모두에 맞게 모델을 최적화할 수 있습니다. 독점 데이터는 전체 사용자 지정 프로세스 동안 안전하게 관리되는 AWS의 환경을 벗어나지 않으므로 보안 및 규정 준수 문제가 완화됩니다.
Amazon Bedrock 콘솔과 Amazon Bedrock API를 통해 Amazon Bedrock에서 강화 미세 조정을 시작할 수 있습니다. 출시 시점부터 Amazon Nova 2 Lite를 통해 강화 미세 조정 기능을 사용할 수 있으며, 곧 추가 모델도 지원할 예정입니다. Amazon Bedrock의 강화 미세 조정 기능에 대해 자세히 알아보려면 출시 블로그, 요금 페이지 및 설명서를 참조하세요.