ขณะนี้ Amazon FSx สำหรับ Lustre รองรับ Elastic Fabric Adapter และ NVIDIA GPUDirect Storage แล้ว

โพสต์บน: 27 พ.ย. 2024

Amazon FSx สำหรับ Lustre ซึ่งเป็นบริการที่ให้การจัดเก็บไฟล์ประสิทธิภาพสูง คุ้มต้นทุน และปรับขนาดได้สำหรับเวิร์กโหลดการประมวลผล ขณะนี้รองรับ Elastic Fabric Adapter (EFA) และ NVIDIA GPUDirect Storage (GDS) แล้ว การเปิดตัวครั้งนี้ทำให้ Amazon FSx สำหรับ Lustre มอบประสิทธิภาพการจัดเก็บข้อมูลที่เร็วที่สุดสำหรับอินสแตนซ์ GPU ในระบบคลาวด์ โดยให้อัตราการโอนถ่ายข้อมูลต่ออินสแตนซ์ของไคลเอ็นต์สูงขึ้นถึง 12 เท่า (1,200 Gbps) เมื่อเปรียบเทียบกับระบบ FSx สำหรับ Lustre ก่อนหน้า เพื่อให้คุณสามารถทำงานการฝึกแมชชีนเลิร์นนิงได้เร็วขึ้นและลดต้นทุนเวิร์กโหลดได้

EFA ปรับปรุงประสิทธิภาพเวิร์กโหลดด้วยการใช้โปรโตคอล AWS Scalable Reliable Datagram (SRD) เพื่อเพิ่มการใช้อัตราการโอนถ่ายข้อมูลเครือข่าย และด้วยการข้ามระบบปฏิบัติการในระหว่างการถ่ายโอนข้อมูล สำหรับแอปพลิเคชันที่ขับเคลื่อนโดยอินสแตนซ์การประมวลผลประสิทธิภาพสูง เช่น Trn1 และ Hpc7a คุณสามารถใช้ EFA เพื่อให้ได้อัตราการโอนถ่ายข้อมูลที่สูงขึ้นต่ออินสแตนซ์ของไคลเอ็นต์ การรองรับ GDS สร้างต่อยอดจาก EFA เพื่อเพิ่มประสิทธิภาพให้ดียิ่งขึ้นด้วยการเปิดใช้งานการถ่ายโอนข้อมูลโดยตรงระหว่างระบบไฟล์และหน่วยความจำ GPU พาธโดยตรงเส้นนี้จะทำให้ไม่ต้องมีการคัดลอกหน่วยความจำและการมีส่วนร่วมของ CPU ในการดำเนินการถ่ายโอนข้อมูล การผสมผสานการรองรับ EFA และ GDS ทำให้แอปพลิเคชันที่ใช้อินสแตนซ์ P5 GPU และ NVIDIA Compute Unified Device Architecture (CUDA) จะมีอัตราการโอนถ่ายข้อมูลได้สูงขึ้นถึง 12 เท่า (สูงสุด 1,200 Gbps) ต่ออินสแตนซ์ของไคลเอ็นต์

การรองรับ EFA และ GDS พร้อมให้ใช้งานโดยไม่มีค่าใช้จ่ายเพิ่มเติมบนระบบไฟล์ Persistent-2 ของ FSx สำหรับ Lustre แบบใหม่ใน AWS Region เชิงพาณิชย์ทุกแห่งที่มีระบบไฟล์ Persistent-2 ให้บริการ ดูข้อมูลเพิ่มเติมเกี่ยวกับฟีเจอร์ใหม่นี้ได้ในเอกสารประกอบ Amazon FSx สำหรับ Lustre และบล็อกข่าว AWS หัวข้อ Amazon FSx สำหรับ Lustre เพิ่มอัตราการโอนถ่ายข้อมูลให้กับอินสแตนซ์ GPU ได้สูงขึ้นถึง 12 เท่า