Amazon SageMaker HyperPod prend désormais en charge les AMI personnalisées (Amazon Machine Images) pour les clusters Slurm
Amazon SageMaker HyperPod prend désormais en charge les AMI personnalisées pour les clusters orchestrés par Slurm, ce qui permet aux clients de déployer des clusters dans des environnements préconfigurés et sécurisés, qui répondent à leurs besoins organisationnels spécifiques. Les clients qui déploient des charges de travail IA/ML sur les custers HyperPod Slurm nécessitent des environnements personnalisés, qui répondent à des exigences strictes en matière de sécurité, de conformité et d’exploitation tout en maintenant des temps de démarrage rapides des clusters, mais sont souvent confrontés à des scripts de configuration du cycle de vie complexes, qui ralentissent le déploiement et créent des incohérences entre les nœuds du cluster.
Cette fonctionnalité permet aux clients de tirer parti des AMI de base optimisées en termes de performances d'HyperPod tout en incorporant des agents de sécurité personnalisés, des outils de conformité, des bibliothèques propriétaires et des pilotes spécialisés directement dans l'image, ce qui permet d'accélérer les temps de démarrage, d'améliorer la fiabilité et de renforcer la conformité en matière de sécurité. Les équipes de sécurité peuvent intégrer des politiques organisationnelles directement dans les images de base, ce qui permet aux équipes d'IA/ML d'utiliser des environnements préapprouvés, qui accélèrent le délai de formation tout en respectant les normes de sécurité de l'entreprise. Vous pouvez spécifier des AMI personnalisées lors de la création de nouveaux clusters HyperPod Slurm à l’aide de l’API CreateCluster, de l’ajout de groupes d’instances avec l’API UpdateCluster ou de l’application de correctifs à des clusters existants avec l’API UpdateClusterSoftware. Les AMI personnalisées doivent être créées à l’aide des AMI de base publiques d’HyperPod afin de maintenir la compatibilité avec les bibliothèques d’entraînement distribuées et les fonctionnalités de gestion de clusters.
Cette fonctionnalité est disponible dans toutes les régions AWS dans lesquelles Amazon SageMaker HyperPod est proposé. Pour en savoir plus sur la prise en charge des AMI personnalisées pour les clusters Slurm, consultez le Guide de l’utilisateur relatif à Amazon SageMaker HyperPod.