Amazon FSx pour Lustre prend désormais en charge Elastic Fabric Adapter et NVIDIA GPUDirect Storage

Publié le: 27 nov. 2024

Amazon FSx pour Lustre, un service qui fournit un stockage de fichiers performant, rentable et évolutif pour les charges de travail de calcul, prend désormais en charge Elastic Fabric Adapter (EFA) et NVIDIA GPUDirect Storage (GDS). Avec ce lancement, Amazon FSx pour Lustre fournit désormais les performances de stockage les plus rapides pour les instances GPU dans le cloud, avec un débit jusqu'à 12 fois supérieur par instance cliente (1 200 Gbit/s) par rapport aux systèmes FSx pour Lustre précédents, ce qui vous permet d'effectuer des tâches d’entraînement de machine learning plus rapidement et de réduire les coûts liés à la charge de travail.

EFA améliore les performances des charges de travail en utilisant le protocole AWS Scalable Reliable Datagram (SRD) pour augmenter l'utilisation du débit réseau, et en contournant le système d'exploitation lors du transfert de données. Pour les applications alimentées par des instances informatiques hautes performances telles que Trn1 et HPC7a, vous pouvez utiliser EFA pour obtenir un débit plus élevé par instance cliente. La prise en charge de GDS s’appuie sur EFA pour améliorer davantage les performances en permettant le transfert direct de données entre le système de fichiers et la mémoire du GPU. Ce chemin direct élimine les copies de mémoire et l'implication du processeur dans les opérations de transfert de données. Grâce à la combinaison de la prise en charge d'EFA et de GDS, les applications utilisant des instances GPU P5 et la technologie NVIDIA Compute Unified Device Architecture (CUDA) peuvent atteindre un débit jusqu'à 12 fois supérieur (jusqu'à 1 200 Gbit/s) par instance cliente.

La prise en charge d’EFA et de GDS est disponible sans frais supplémentaires sur les nouveaux systèmes de fichiers FSx pour Lustre Persistent-2 dans toutes les régions AWS commerciales où les systèmes de fichiers Persistent-2 sont disponibles. Pour en savoir plus sur cette nouvelle fonctionnalité, consultez la documentation relative à Amazon FSx pour Lustre et le blog AWS News. Amazon FSx pour Lustre multiplie par 12 le débit des instances GPU.