Amazon SageMaker Clarify artık temel model değerlendirmelerini destekliyor
SageMaker Clarify ile temel model değerlendirmeleri artık genel olarak kullanılabilir. Bu yetenek, veri bilimcilerinin ve makine öğrenimi mühendislerinin birkaç dakika içinde farklı görevlerde çeşitli kriterlere dayalı temel modelleri değerlendirmesine, karşılaştırmasına ve seçmesine yardımcı olur.
SageMaker müşterileri, üretken yapay zeka uygulamalarına güç sağlamak için yüzlerce temel modeli arasından seçim yapar. Kullanım durumlarına en uygun uyumu belirlemek için model seçimi ve model özelleştirme sırasında bu modelleri değerlendirir ve karşılaştırırlar. Bu süreç, ilgili kriterleri belirlemek, değerlendirme araçlarını yapılandırmak ve her model üzerinde değerlendirme yapmak günler sürebilir. Elde edilen sonuçların belirli kullanım durumlarına uygulanması genellikle zordur.
SageMaker Clarify yorumlanabilir sonuçlarla otomatik ve insan değerlendirmeleri sunar. Müşteriler Amazon SageMaker Studio'daki bu yeni özelliği SageMaker Barındırılan LLM'leri değerlendirmek için kullanabilir veya herhangi bir LLM'yi değerlendirmek için fmeval'i kullanabilir. Metin oluşturma, özetleme, soru yanıtlama ve sınıflandırma gibi görevler için uyarlanmış seçilmiş bilgi istemi veri kümelerini kullanarak başlayın. Çıkarım parametrelerini ve istem şablonlarını özelleştirin ve farklı model ayarlarının sonuçlarını karşılaştırın. Değerlendirmeleri özel istem veri kümeleri ve metriklerle genişletin. İnsan değerlendirmeleri, müşterilerin yaratıcılık ve stil gibi daha öznel yönleri değerlendirmelerini sağlar. Her değerlendirmenin ardından müşteriler görselleştirmeler ve örneklerle tamamlanmış kapsamlı bir rapor alır ve bunları SageMaker ML iş akışlarına entegre eder.
Bu özellik AWS GovCloud (ABD) Bölgeleri, Çin Bölgeleri, Asya Pasifik (Haydarabad), Asya Pasifik (Melbourne), Batı Kanada (Calgary), Avrupa (Zürih), Avrupa (Stockholm), Avrupa (İspanya), İsrail (Tel Aviv), Orta Doğu (BAE) hariç tüm AWS Bölgelerinde kullanılabilir.
Ek ayrıntılar için ürün sayfamıza, belgel ere ve fiyatlandırma sayfamıza bakın.