AWS Batch prend désormais en charge la gestion des quotas et la préemption pour les tâches d’entraînement SageMaker
AWS Batch prend désormais en charge la gestion des quotas avec la préemption des tâches pour les tâches d’entraînement SageMaker, ce qui vous permet d’allouer et de partager efficacement les ressources informatiques entre vos équipes et vos projets. Si vous utilisez la capacité du processeur graphique pour les tâches d’entraînement SageMaker, vous pouvez désormais allouer intelligemment les ressources de calcul, hiérarchiser les tâches de formation critiques pour votre entreprise et préempter automatiquement les charges de travail les moins prioritaires lorsque vos expériences urgentes arrivent.
Grâce à la gestion des quotas, vous pouvez créer jusqu’à 20 partages de quotas par file d’attente de tâches qui fonctionnent comme des files d’attente virtuelles avec des limites de capacité dédiées et des stratégies de partage de ressources configurables. Le service utilise automatiquement la préemption croisée pour rétablir la capacité empruntée lorsque le propriétaire initial soumet des tâches, et prend en charge la préemption en partage pour permettre aux tâches hautement prioritaires de devancer les tâches moins prioritaires dans le même quota. Vous pouvez surveiller l’utilisation de la capacité dans la file d’attente, le partage des quotas et la granularité au niveau des tâches, mettre à jour les priorités des tâches après leur soumission pour influencer les décisions de préemption et configurer des limites de nouvelles tentatives de préemption pour contrôler le comportement. La fonctionnalité s’intègre directement au kit SDK Python de SageMaker via le module aws_batch.
La gestion des quotas avec préemption pour les tâches de formation SageMaker est disponible dès aujourd’hui dans toutes les régions AWS où AWS Batch est disponible. Pour en savoir plus, consultez notre notebook d’exemples de gestion des quotas sur GitHub ainsi que le Guide de l’utilisateur d’AWS Batch.