AWS Batch prend désormais en charge la planification des groupes sur Amazon EKS à l'aide de tâches parallèles multi-nœuds
AWS annonce aujourd'hui la disponibilité générale des tâches parallèles multi-nœuds (MNP) dans AWS Batch sur Amazon Elastic Kubernetes Service (Amazon EKS). Avec les tâches AWS Batch MNP, vous pouvez exécuter des applications de calcul haute performance (HPC) étroitement couplées, telles que la formation de modèles IA et de machine learning multicouches. AWS Batch vous aide à lancer, configurer et gérer les nœuds de votre cluster Amazon EKS sans intervention manuelle.
Vous pouvez configurer les tâches MNP à l'aide de l'API RegisterJobsDefinition ou via les sections de définitions de tâches de la console de gestion AWS Batch. Avec les tâches MNP, vous pouvez exécuter AWS Batch sur des charges de travail Amazon EKS qui couvrent plusieurs instances Amazon Elastic Compute Cloud (Amazon EC2). Les jobs AWS Batch MNP prennent en charge tous les cadres de communication inter-instances basés sur IP, tels que la bibliothèque de communications collectives de NVIDIA (NCCL; Collective Communications Library), Gloo, Message Passing Interface (MPI) ou Unified Collective Communication (UCC), ainsi que les bibliothèques de machine learning et d’informatique parallèle telles que PyTorch et Dask. Pour en savoir plus, consultez la page des tâches parallèles multi-nœuds dans le Guide de l'utilisateur d’AWS Batch.
AWS Batch aide les développeurs, les scientifiques et les ingénieurs à exécuter un traitement par lots efficace pour la formation, la simulation et l'analyse de modèles de machine learning à n'importe quelle échelle. Les tâches parallèles multi-nœuds sont disponibles dans toutes les régions AWS où AWS Batch est disponible.