러스터에 아마존 FSx를 사용해야 하는 이유
Amazon FSx for Lustre는 세계에서 가장 인기 있는 고성능 파일 시스템인 Lustre에서 제공하는 비용 효율적이고 확장 가능한 고성능 스토리지를 제공하는 완전 관리형 서비스입니다. FSx for Lustre는 초당 최대 테라바이트의 처리량, 수백만 IOPS, 1밀리초 미만의 지연 시간, 사실상 무제한의 스토리지 용량을 통해 클라우드의 GPU 인스턴스에 가장 빠른 스토리지 성능을 제공합니다. 온프레미스 HDD 파일 스토리지에 비해 최대 34% 더 나은 가격 대비 성능을 제공하고 클라우드의 다른 고성능 파일 시스템에 비해 최대 70% 더 나은 가격 성능을 제공합니다.
FSx for Lustre의 이점
엘라스틱 패브릭 어댑터 및 NVIDIA GPUDirect 스토리지를 사용하여 클라이언트당 최대 1200Gbps의 처리량으로 클라우드에서 GPU 인스턴스를 위한 가장 빠른 스토리지 성능으로 AI, ML 및 HPC 워크로드를 가속화합니다.
월별 GB당 0.005 USD 미만부터 시작하는 FSx for Lustre Intelligent-Tiering 스토리지 클래스를 사용하면 저장한 데이터에 대해서만 요금을 부과하고 자주 액세스하지 않는 계층, 아카이브 계층 간의 자동 계층화를 통해 비용을 절감할 수 있습니다.
완전히 탄력적인 유일한 Lustre 파일 시스템은 필요에 따라 자동으로 확장하거나 축소하며 저장한 데이터에 대해서만 요금을 청구합니다. 용량 부족, 하드웨어 업데이트, 파일 서버 관리, 소프트웨어 구성 또는 성능 튜닝에 대해 걱정할 필요가 없습니다. Amazon FSx for Lustre는 완전관리형이며 시간이 많이 걸리는 이러한 관리 작업을 자동화합니다.
파일 시스템을 S3 버킷에 연결하여 고성능 파일 시스템에서 Amazon Simple Storage Service (Amazon S3) 데이터에 액세스하고 이를 처리합니다. 또한 Amazon FSx for Lustre는 Amazon SageMaker HyperPod와 기본적으로 통합되어 기계 학습 (ML) 워크로드를 위한 빠른 스토리지를 제공하며 포괄적인 오케스트레이션, 모니터링 및 보안을 위해 Amazon EKS, AWS 백업, AWS ParallelCluster, Amazon CloudWatch 및 IAM을 비롯한 AWS 서비스와 통합됩니다.
사용 사례
클라우드에서 가장 빠른 GPU 인스턴스 스토리지로 ML 데이터 로드, 모델 체크포인팅, 추론 작업, 키-값 (KV) 캐싱을 가속화합니다.
초당 테라바이트의 처리량과 수백만 IOPS를 제공하여 고성능 워크로드를 지원합니다.
대규모 재무 데이터 세트를 고속으로 처리하여 정량 분석 및 위험 모델링을 가속화합니다.
HCLS 워크플로우용으로 설계된 고성능 스토리지로 유전체 분석 및 극저온 EM 분석을 가속화합니다.
기상 모델 처리를 위한 처리량이 많은 스토리지로 정밀한 날씨 예측 기능을 제공합니다.