Amazon FSx for Lustre

컴퓨팅 워크로드 구동을 위한 확장 가능한 고속 공유 스토리지

Amazon FSx for Lustre는 컴퓨팅 워크로드를 위한 경제적인 고성능 스토리지를 제공하는 완전관리형 서비스입니다. 기계 학습, 고성능 컴퓨팅(HPC), 동영상 렌더링, 금융 시뮬레이션 같은 많은 워크로드는 고성능 공유 스토리지를 통해 동일한 데이터 세트에 액세스하는 컴퓨팅 인스턴스를 활용합니다.

업계에서 가장 널리 사용되는 고성능 파일 시스템인 Lustre를 기반으로 하는 FSx for Lustre는 1밀리초 미만의 지연 시간, 초당 최대 수백 기가바이트의 처리량, 수백만 IOPS를 제공하며, 여러 배포 옵션과 스토리지 유형을 바탕으로 워크로드 요구 사항에 대해 비용과 성능을 최적화합니다.

또한 FSx for Lustre 파일 시스템은 Amazon S3 버킷에 연결할 수 있으므로 고성능 파일 시스템과 S3 API 모두에서 동시에 데이터를 액세스하고 처리할 수 있습니다.

개요: Amazon FSx for Lustre

이점

뛰어난 성능 및 확장성

Amazon FSx for Lustre는 광범위한 고성능 워크로드를 충족할 수 있는 성능을 제공합니다. Lustre 파일 시스템은 데이터 처리에 최적화되어 있으며 1밀리초 미만의 지연 시간과 초당 수백 기가바이트로 확장되는 처리량이 특징입니다. 클릭 몇 번 만으로 몇 만 개에 달하는 컴퓨팅 인스턴스에서 고성능 공유 스토리지에 액세스할 수 있습니다.

S3 데이터의 사용 편의성

Amazon FSx for Lustre를 활용하면 S3에서 클라우드 데이터 세트를 손쉽게 처리할 수 있습니다. FSx for Lustre를 S3 버킷에 연결하면 객체를 투명하게 파일로 표시되므로 S3에서 전송되는 데이터를 관리하지 않고도 워크로드를 실행할 수 있습니다. S3 버킷 콘텐츠가 변경되면 FSx for Lustre는 워크로드를 실행하는 데 사용할 수 있는 최신 데이터로 파일 시스템을 자동으로 업데이트합니다.

비용 효율성

Amazon FSx for Lustre는 다양한 스토리지 옵션을 통해 가격과 성능을 최적화합니다. 반도체 드라이브(SSD) 스토리지는 지연 시간에 민감한 워크로드에 최적화되어 있고, 하드 디스크 드라이브(HDD) 스토리지는 처리량에 중심을 둔 워크로드에 최적화되어 있습니다. 또한 복제되지 않은 스크래치 파일 시스템을 선택하여 단기적인 데이터 처리 시 비용을 추가로 절감할 수 있습니다. 

Linux 워크로드용 설계

Amazon FSx for Lustre는 POSIX와 호환되므로, 특별히 변경하지 않아도 현재 Linux 기반 애플리케이션을 사용할 수 있습니다. FSx for Lustre는 네이티브 파일 시스템 인터페이스를 제공하며 Linux 운영 체제에서 수행하는 파일 시스템처럼 작동하며, 읽기 후 쓰기 일관성 확인 기능을 제공하고 파일 잠금을 지원합니다. 파일 시스템은 Amazon EC2 인스턴스나 Amazon EKS에서 또는 AWS Direct Connect 또는 AWS VPN을 통해 온프레미스에서 액세스할 수 있습니다.

간단한 완전관리형

Amazon FSx for Lustre를 사용하면 클라우드에서 고성능 Lustre 파일 시스템을 쉽게 시작하고 실행할 수 있습니다. 더 이상 하드웨어 프로비저닝 및 유지 관리, 소프트웨어 구성, 백업 관리 및 파일 시스템의 복잡한 성능 튜닝에 대해 걱정할 필요가 없습니다. AWS Management Console, AWS CLI 또는 AWS SDK를 사용하여 몇 분 만에 Amazon FSx for Lustre 파일 시스템을 생성하고 시작할 수 있습니다.

보안 및 규정 준수

Amazon FSx for Lustre는 저장 데이터 및 전송 데이터를 자동으로 암호화합니다. 규제를 준수해야 하는 대상을 위해 FSx for Lustre는 PCI-DSS, ISO 및 SOC를 준수하며, HIPAA 적격 서비스이기도 합니다. POSIX 권한 또는 Amazon Virtual Private Cloud(VPC) 보안 그룹 규칙을 통해 네트워크 액세스를 제어할 수 있습니다.

사용 사례

기계 학습

기계 학습 워크로드는 막대한 양의 교육 데이터를 사용합니다. 이러한 워크로드는 여러 컴퓨팅 인스턴스가 동시에 교육 데이터 세트를 처리해야 하므로 공유 파일 스토리지를 사용하는 경우가 많습니다. FSx for Lustre는 ML 교육 데이터 세트를 처리하기 위해 높은 처리량 및 일관성 있고 낮은 지연 시간을 갖춘 공유 파일 스토리지를 제공하므로 기계 학습 워크로드에 이상적입니다. FSx for Lustre는 Amazon SageMaker에도 통합되므로 교육 작업을 가속화할 수 있습니다.

고성능 컴퓨팅

HPC(고성능 컴퓨팅)를 사용하면 과학자와 엔지니어가 복잡하고 컴퓨팅 집약적인 문제를 해결할 수 있습니다. 석유 및 가스 발견과 게놈 분석 등의 HPC 워크로드는 높은 수준의 처리량으로 여러 컴퓨팅 인스턴스에서 액세스해야 하는 막대한 양의 데이터를 처리합니다. FSx for Lustre는 이러한 HPC 및 과학 컴퓨팅 워크로드에 적합한데, 수천 개의 EC2 인스턴스 전체에서 파일 시스템 액세스를 통해 고성능 워크로드의 성능과 비용에 최적화된 파일 시스템을 제공하기 때문입니다. FSx for Lustre는 AWS ParallelCluster와 AWS Batch에도 통합되므로 HPC 워크로드에 쉽게 사용할 수 있습니다.

미디어 처리 및 트랜스코딩

동영상 렌더링, 시각 효과 및 미디어 제작과 같은 미디어 데이터 처리 워크플로에서는 대량으로 생성된 데이터를 처리할 수 있는 컴퓨팅 및 스토리지 리소스를 필요로 합니다. FSx for Lustre는 디지털 미디어 파일 처리, 배포 및 분석에 필요한 고성능을 제공하며, 지연 시간도 짧습니다.

자율 주행 차량

자율 주행 차량 시스템을 개발하는 고객은 차량 안전을 확보하기 위해 대규모 차량 센서 및 카메라 데이터에 대한 교육을 진행하고 시뮬레이션을 실행하는 방식으로 모델을 테스트하는 경우가 많습니다. FSx for Lustre를 사용하면 수천 개의 노드로부터 이 데이터에 뛰어난 성능 수준으로 액세스할 수 있으므로 보다 쉽게 대규모로 시뮬레이션을 실행하고 모델 개발을 가속화할 수 있습니다.

빅 데이터 및 금융 분석

SAS Grid 워크로드, 금융 분석 같은 빅 데이터 분석 사용 사례에서는 대량의 데이터를 생성하므로, 데이터 집약적 애플리케이션을 지원할 고성능 스토리지가 필요합니다. 끝없이 증가하는 데이터 볼륨을 처리하는 작업은 비용이 많이 들고 복잡합니다. Amazon FSx for Lustre는 대량의 데이터를 대규모로 처리할 수 있으며 성능 및 비용 최적화되어 있기 때문에 검색 및 조직의 가치 실현 시간을 단축합니다.

전자 설계 자동화

EDA(전자 설계 자동화)는 실리콘 칩 생산의 설계 단계에서 성능 및 오류를 시뮬레이션하는 데 사용되는 고성능 애플리케이션입니다. FSx for Lustre는 빠르게 혁신하고, 새로운 제품을 설계 및 확인하고, 수요에 맞춰 조정할 수 있는 성능과 유연성을 제공해줍니다.

Product-Page_Standard-Icons_01_Product-Features_SqInk
Amazon FSx for Lustre 기능 확인

Amazon FSx for Lustre의 주요 기능에 대해 자세히 알아보십시오.

자세히 알아보기 
Product-Page_Standard-Icons_02_Sign-Up_SqInk
무료 계정에 가입

AWS 프리 티어에 즉시 액세스할 수 있습니다. 

가입하기 
Product-Page_Standard-Icons_03_Start-Building_SqInk
콘솔에서 구축 시작

AWS 콘솔에서 Amazon FSx for Lustre 구축을 시작하십시오.

로그인