AWS PCS теперь поддерживает пользовательские настройки общих ресурсов (GRES), топологию оборудования и MIG
Сервис параллельных вычислений AWS (AWS PCS) теперь поддерживает пользовательские настройки общих ресурсов (Generic Resource, GRES) и топологию оборудования, а также в него добавлена поддержка Slurm версии 26.05. Эти возможности позволяют лучше контролировать, как Slurm видит и планирует работу кластерного оборудования, улучшая распределение задач для рабочих нагрузок HPC и машинного обучения. Они также обеспечивают поддержку графического процессора NVIDIA с несколькими инстансами (NVIDIA Multi-Instance GPU, MIG), который разделяет один графический процессор на изолированные инстансы, планируемые Slurm независимо.
В версии Slurm 26.05 AWS PCS по умолчанию настраивает аппаратную топологию, рассматривая домены NUMA каждого узла как сокеты Slurm. Он также автоматически определяет и настраивает привязку к ядру графического процессора и межсоединение графического процессора на его узлах. Тесно связанные задания MPI теперь могут оптимизировать размещение рангов с помощью привязки к сокету, а задания графического процессора выполняются на ядрах, локальных по отношению к выделенным графическим процессорам. В пользовательских настройках Slurm и GRES при необходимости обеспечивается дополнительная гибкость. Можно объявить дополнительные ускорители, разделить графический процессор с помощью MIG, использовать домены кэша L3 в качестве сокетов или переопределить значения по умолчанию AWS PCS.
AWS PCS – это управляемый сервис, который упрощает выполнение и масштабирование рабочих нагрузок высокопроизводительных вычислений в AWS с помощью Slurm. Вы сможете создавать полноценные эластичные среды, которые объединяют в себе вычислительные ресурсы, системы хранения данных, сети и инструменты визуализации, а сервис будет управлять обновлением кластера и предоставлять встроенные функции наблюдаемости.
Данные возможности доступны во всех регионах AWS, в которых предлагается AWS PCS. В Slurm 26.05 также внесены более масштабные улучшения в планирование и наблюдаемость, описанные в примечаниях к выпуску Slurm 26.05. Дополнительные сведения см. в разделах Настройка пользовательских параметров GRES, Настройка топологии оборудования и Настройка графического процессора с несколькими инстансами (MIG) в руководстве пользователя AWS PCS.