Amazon SageMaker AI unterstützt jetzt die Feinabstimmung von Serverless-Reinforcement für 12 weitere Modelle
Amazon SageMaker AI unterstützt jetzt die Serverless-Modellanpassung und die Reinforcement-Feinabstimmung für 12 weitere Open-Weight-Modelle, sodass Sie diese optimieren und evaluieren können, ohne Infrastruktur bereitstellen oder verwalten zu müssen. Dies sind die neu unterstützten Modelle: gpt-oss-120b, Qwen2.5 72B Instruct, DeepSeek-R1-Distill-Llama-70B, Qwen3 14B, DeepSeek-R1-Distill-Qwen-14B, Qwen2.5 14B Instruct, DeepSeek-R1-Distill-Llama-8B, DeepSeek-R1-Distill-Qwen-7B, Qwen3 4B, Meta Llama 3.2 3B Instruct, Qwen3 1.7B und DeepSeek-R1-Distill-Qwen-1.5B. Mit dieser Erweiterung können Sie diese Modelle mithilfe von Methoden wie der überwachten Feinabstimmung (Supervised Fine-Tuning, SFT), der direkten Präferenzoptimierung (Direct Preference Optimization, DPO) und der Reinforcement-Feinabstimmung (Reinforcement Fine-Tuning, RFT) einschließlich RLVR und RLAIF anpassen und nur für das bezahlen, was Sie tatsächlich nutzen.
Die Reinforcement-Feinabstimmung ermöglicht Ihnen, Modelle auf komplexe, domänenspezifische Reasoning-Aufgaben auszurichten, bei denen Methoden wie herkömmliche SFT allein nicht ausreichen. Mit RLVR können Sie die Modellgenauigkeit bei überprüfbaren Aufgaben wie Codegenerierung, Mathematik und strukturierter Extraktion verbessern, indem Sie Belohnungssignale auf der Grundlage von Richtigkeit bereitstellen. RLAIF verwendet KI-generiertes Feedback, um das Modellverhalten an Ihren Qualitäts- und Sicherheitspräferenzen auszurichten. Diese Methoden sind für bereits unterstützte und neu hinzugefügte Modelle verfügbar, ohne dass Fachwissen in den Bereichen Clustereinrichtung, Kapazitätsplanung oder verteiltes Training erforderlich ist.
Diese Modelle und Methoden der Feinabstimmung sind in den Regionen USA Ost (Nord-Virginia), USA West (Oregon), Asien-Pazifik (Tokio) und Europa (Irland) verfügbar. Sehen Sie sich zum Einstieg die Produktseite für die Modellanpassung von Amazon SageMaker AI sowie die Preisseite von Amazon SageMaker AI (Tab „Model Customization“ (Modellanpassung)) an, um die vollständige Liste der Modelle, Methoden und Preise zu sehen.