Amazon FSx para Lustre já oferece suporte ao Elastic Fabric Adapter e ao NVIDIA GPUDirect Storage
O Amazon FSx para Lustre, um serviço que fornece armazenamento de arquivos de alta performance, econômico e escalável para workloads de computação, já oferece suporte ao Elastic Fabric Adapter (EFA) e ao NVIDIA GPUDirect Storage (GDS). Com esse lançamento, o Amazon FSx para Lustre passa a oferecer o armazenamento mais rápido para instâncias de GPU na nuvem, oferecendo um throughput até 12 vezes maior por instância de cliente (1.200 Gbps) em comparação aos sistemas do FSx para Lustre anteriores, permitindo concluir trabalhos de treinamento de machine learning em menos tempo e reduzir os custos das workloads.
O EFA aprimora a performance das workloads usando o protocolo AWS Scalable Reliable Datagram (SRD) para aumentar a utilização do throughput da rede e ignorando o sistema operacional durante a transferência de dados. Para aplicações baseadas em instâncias de computação de alta performance, como Trn1 e Hpc7a, você pode usar o EFA para obter um throughput maior por instância de cliente. O suporte ao GDS usa o EFA para aprimorar ainda mais a performance, permitindo a transferência direta de dados entre o sistema de arquivos e a memória da GPU. Esse caminho direto elimina as cópias na memória e o envolvimento da CPU nas operações de transferência de dados. Combinando o suporte ao EFA e ao GDS, as aplicações que usam instâncias de GPU P5 e a NVIDIA Compute Unified Device Architecture (CUDA) podem atingir um throughput até 12 vezes maior (até 1.200 Gbps) por instância de cliente.
O suporte ao EFA e ao GDS está disponível sem custo adicional nos novos sistemas de arquivos Persistent-2 do FSx para Lustre em todas as regiões comerciais da AWS que oferecem esses sistemas de arquivos. Para obter mais informações sobre esse novo recurso, consulte a documentação do Amazon FSx para Lustre e a publicação Amazon FSx for Lustre increases throughput to GPU instances by up to 12x no Blog de notícias da AWS.