Amazon FSx für Lustre unterstützt jetzt Elastic Fabric Adapter und NVIDIA GPUDirect Storage
Amazon FSx für Lustre, ein Service, der leistungsstarken, kostengünstigen und skalierbaren Dateispeicher für Computing-Workloads bereitstellt, unterstützt jetzt Elastic Fabric Adapter (EFA) und NVIDIA GPUDirect Storage (GDS). Mit diesem Launch bietet Amazon FSx für Lustre jetzt die schnellste Speicherleistung für GPU-Instances in der Cloud und im Vergleich zu früheren FSx für Lustre-Systemen einen bis zu 12-mal höheren Durchsatz pro Client-Instance (1.200 Gbit/s), sodass Sie Machine-Learning-Trainingsjobs schneller abschließen und die Workload-Kosten reduzieren können.
EFA verbessert die Workload-Leistung, indem das AWS-Protokoll Scalable Reliable Datagram (SRD) verwendet wird, um den Netzwerkdurchsatz zu erhöhen, und indem das Betriebssystem bei der Datenübertragung umgangen wird. Anwendungen, die High-Performance-Computing-Instances wie Trn1 und HPC7a nutzen, können mithilfe von EFA einen höheren Durchsatz pro Client-Instance erzielen. Die GDS-Unterstützung baut auf EFA auf, um die Leistung weiter zu verbessern, indem sie eine direkte Datenübertragung zwischen dem Dateisystem und dem GPU-Speicher ermöglicht. Dieser direkte Pfad macht Speicherkopien und die CPU-Beteiligung an Datenübertragungsvorgängen überflüssig. Durch die gemeinsame Verwendung von EFA und GDS können Anwendungen, die P5-GPU-Instances und NVIDIA Compute Unified Device Architecture (CUDA) verwenden, einen bis zu 12-mal höheren Durchsatz (bis zu 1.200 Gbit/s) pro Client-Instance erreichen.
EFA und GDS sind jetzt kostenlos auf neuen FSx für Lustre Persistent_2-Dateisysteme in allen kommerziellen AWS-Regionen verfügbar, in denen Persistent_2 Dateisysteme verfügbar sind. Weitere Informationen zu diesem neuen Feature finden Sie in der Dokumentation zu Amazon FSx für Lustre und im AWS-News-Blog Amazon FSx für Lustre erhöht den Durchsatz für GPU-Instances um das bis zu 12-fache.