Amazon SageMaker AI estende il supporto al fine-tuning di rinforzo serverless per 12 nuovi modelli
Amazon SageMaker AI estende il supporto alla personalizzazione di modelli serverless e al fine-tuning di rinforzo a 12 nuovi modelli open-weight, permettendo di eseguire il fine-tuning e la valutazione senza necessità di provisioning o gestione dell'infrastruttura. I modelli di nuova aggiunta sono: gpt-oss-120b, Qwen2.5 72B Instruct, DeepSeek-R1-Distill-Llama-70B, Qwen3 14B, DeepSeek-R1-Distill-Qwen-14B, Qwen2.5 14B Instruct, DeepSeek-R1-Distill-Llama-8B, DeepSeek-R1-Distill-Qwen-7B, Qwen3 4B, Meta Llama 3.2 3B Instruct, Qwen3 1.7B e DeepSeek-R1-Distill-Qwen-1.5B. Questa espansione rende possibile personalizzare i modelli tramite tecniche di fine-tuning supervisionato (SFT), ottimizzazione diretta delle preferenze (DPO) e fine-tuning di rinforzo (RFT), inclusi RLVR e RLAIF, con un modello di costo basato sull'utilizzo effettivo.
Il fine-tuning di rinforzo consente di allineare i modelli a compiti di ragionamento complessi e specifici del dominio in cui il solo SFT tradizionale risulta insufficiente. Con RLVR è possibile migliorare la precisione del modello su compiti verificabili quali generazione di codice, calcolo matematico ed estrazione strutturata, attraverso segnali di ricompensa basati sulla correttezza dei risultati. RLAIF sfrutta il feedback generato dall'IA per orientare il comportamento del modello in base ai requisiti di qualità e sicurezza definiti. Queste tecniche sono disponibili sia sui modelli già supportati sia su quelli di nuova aggiunta, senza richiedere configurazione del cluster, pianificazione della capacità o competenze specifiche in materia di training distribuito.
Questi modelli e tecniche di fine-tuning sono disponibili nelle regioni AWS Stati Uniti orientali (Virginia settentrionale), Stati Uniti occidentali (Oregon), Asia Pacifico (Tokyo) ed Europa (Irlanda). Per iniziare, consulta la pagina del prodotto relativa alla personalizzazione dei modelli di Amazon SageMaker AI. Per l'elenco completo di modelli, tecniche e prezzi, consulta invece la pagina dei prezzi di Amazon SageMaker AI (scheda Personalizzazione modelli).