Amazon FSx for Lustre

Amazon FSx for Lustre를 사용하면 세계에서 가장 인기 있는 고성능 파일 시스템을 쉽고 비용 효과적으로 시작 및 실행할 수 있습니다. 기계 학습, HPC(고성능 컴퓨팅), 비디오 프로세싱 및 금융 모델링과 같이 속도가 중요한 워크로드에 사용하십시오.

오픈 소스인 Lustre 파일 시스템은 컴퓨팅과 보조를 맞춰야 하는 빠른 스토리지를 필요로 하는 애플리케이션용으로 설계되었습니다. Lustre는 세상에서 빠르게 증가하는 데이터 세트를 신속하고 비용 효과적으로 처리하도록 제작되었으며 세계에서 가장 빠른 500대 컴퓨터에서 가장 널리 사용되는 파일 시스템로서, 밀리초 미만의 지연 시간과 초당 최대 수백 기가바이트 및 수백만 IOPS에 달하는 처리량을 제공합니다.

이제 완전 관리형 서비스로 제공되는 Amazon FSx는 스토리지 속도가 중요한 모든 워크로드에 Lustre 파일 시스템을 사용할 수 있게 해 줍니다. 이 서비스는 Lustre 파일 시스템의 설정 및 관리에 따르는 기존의 복잡성을 제거하여 고성능 파일 시스템을 단 몇 분 만에 가동할 수 있게 해 줍니다. 비용 최적화를 위한 여러 배포 옵션도 제공됩니다.

FSx for Lustre는 Amazon S3와 통합되므로 Lustre 파일 시스템으로 데이터 세트를 처리하는 작업이 쉬워집니다. FSx for Lustre 파일 시스템을 S3 버킷과 연결하는 경우 S3 객체가 투명하게 파일로 표시되며 변경된 데이터를 다시 S3에 쓸 수 있습니다.

개요: Amazon FSx for Lustre

이점

뛰어난 성능 및 확장성

Amazon FSx for Lustre는 광범위한 고성능 워크로드를 충족할 수 있는 성능을 제공합니다. Lustre 파일 시스템은 데이터 처리에 최적화되어 있으며 1밀리초 미만의 지연 시간과 초당 수백 기가바이트로 확장되는 처리량이 특징입니다.

S3 데이터에 대한 원활한 액세스

Amazon FSx for Lustre는 Amazon S3와 기본적으로 통합되므로 고성능 POSIX 인터페이스를 통해 S3에서 클라우드 데이터 세트를 손쉽게 처리할 수 있습니다. FSx for Lustre를 S3 버킷에 연결하면 S3 객체가 투명하게 파일로 표시됩니다. FSx for Lustre는 변경 사항을 추적하며 파일 시스템의 변경된 데이터와 새 데이터를 S3 버킷에 언제든지 다시 쓸 수 있게 해 줍니다.

간편성 및 완전한 관리

Amazon FSx for Lustre를 사용하면 클라우드에서 고성능 Lustre 파일 시스템을 쉽게 시작하고 실행할 수 있습니다. 더 이상 하드웨어 프로비저닝 및 유지 관리, 소프트웨어 구성 및 파일 시스템의 복잡한 성능 튜닝에 대해 걱정할 필요가 없습니다. AWS Management Console, AWS CLI 또는 AWS SDK를 사용하여 몇 분 만에 Amazon FSx for Lustre 파일 시스템을 생성하고 시작할 수 있습니다.

실행 중인 Linux 애플리케이션을 통해 어디에서든 액세스

Amazon FSx for Lustre는 POSIX와 호환되므로, 특별히 변경하지 않아도 현재 Linux 기반 애플리케이션을 사용할 수 있습니다. FSx for Lustre는네이티브 파일 시스템 인터페이스를 제공하며 Linux 운영 체제에서 수행하는 파일 시스템처럼 작동합니다. 또한 읽기 후 쓰기 일관성 확인 기능을 제공하고 파일 잠금을 지원합니다. FSx for Lustre 파일 시스템에 대한 액세스는 POSIX 권한 및 Amazon Virtual Private Cloud(VPC) 규칙으로 제어할 수 있습니다. 파일 시스템은 Amazon EC2 인스턴스에서 또는 AWS Direct Connect 또는 AWS VPN을 사용하여 온프레미스 컴퓨터에서 액세스할 수 있습니다.

다양한 배포 옵션

Amazon FSx for Lustre는 단기 및 장기 데이터 프로세싱을 위해 스크래치 및 영구 파일 시스템 옵션을 제공합니다. 스크래치 파일 시스템은 임시 스토리지 및 단기적 데이터 프로세싱에 이상적입니다. 데이터는 복제되지 않으며 파일 서버에 장애가 발생할 경우 유지되지 않습니다. 영구 파일 시스템은 장기적 스토리지 및 워크로드에 이상적입니다. 영구 파일 시스템에서는 데이터가 복제되며 파일 서버에 장애가 발생할 경우 교체됩니다.

보안 및 규정 준수

Amazon FSx for Lustre는 저장 데이터 및 전송 데이터를 자동으로 암호화합니다. 규제를 준수해야 하는 대상을 위해 FSx for Lustre는 PCI-DSS, ISO 및 SOC를 준수하며, HIPAA 적격 서비스이기도 합니다. Amazon Virtual Private Cloud(VPC) 보안 그룹 규칙을 통해 네트워크 액세스를 제어할 수도 있습니다.

사용 사례

기계 학습

기계 학습 워크로드는 막대한 양의 교육 데이터를 사용합니다. 이러한 워크로드는 여러 컴퓨팅 인스턴스가 동시에 교육 데이터 세트를 처리해야 하므로 공유 파일 스토리지를 사용하는 경우가 많습니다. FSx for Lustre는 ML 교육 데이터 세트를 처리하기 위해 높은 처리량 및 일관성 있고 낮은 지연 시간을 갖춘 공유 파일 스토리지를 제공하므로 기계 학습 워크로드에 이상적입니다. FSx for Lustre는 Amazon SageMaker에도 통합되므로 교육 작업을 가속화할 수 있습니다.

고성능 컴퓨팅

HPC(고성능 컴퓨팅)를 사용하면 과학자와 엔지니어가 복잡하고 컴퓨팅 집약적인 문제를 해결할 수 있습니다. 석유 및 가스 발견과 게놈 분석 등의 HPC 워크로드는 높은 수준의 처리량으로 여러 컴퓨팅 인스턴스에서 액세스해야 하는 막대한 양의 데이터를 처리합니다. FSx for Lustre는 이러한 HPC 및 과학 컴퓨팅 워크로드에 적합한데, 수천 개의 EC2 인스턴스 전체에서 파일 시스템 액세스를 통해 고성능 워크로드의 성능과 비용에 최적화된 파일 시스템을 제공하기 때문입니다. FSx for Lustre는 AWS ParallelCluster와 AWS Batch에도 통합되므로 HPC 워크로드에 쉽게 사용할 수 있습니다.

미디어 처리 및 트랜스코딩

동영상 렌더링, 시각 효과 및 미디어 제작과 같은 미디어 데이터 처리 워크플로에서는 대량으로 생성된 데이터를 처리할 수 있는 컴퓨팅 및 스토리지 리소스를 필요로 합니다. FSx for Lustre는 디지털 미디어 파일 처리, 배포 및 분석에 필요한 고성능을 제공하며, 지연 시간도 짧습니다.

자율 주행 차량

자율 주행 차량 시스템을 개발하는 고객은 차량 안전을 확보하기 위해 대규모 차량 센서 및 카메라 데이터에 대한 교육을 진행하고 시뮬레이션을 실행하는 방식으로 모델을 테스트하는 경우가 많습니다. FSx for Lustre를 사용하면 수천 개의 노드로부터 이 데이터에 뛰어난 성능 수준으로 액세스할 수 있으므로 보다 쉽게 대규모로 시뮬레이션을 실행하고 모델 개발을 가속화할 수 있습니다.

빅 데이터 및 금융 분석

부정 탐지, 금융 분석 같은 빅 데이터 분석 사용 사례에서는 대량의 데이터를 생성하므로, 데이터 집약적 애플리케이션을 지원할 고성능 스토리지가 필요합니다. 끝없이 증가하는 데이터 볼륨을 처리하는 작업은 비용이 많이 들고 복잡합니다. Amazon FSx for Lustre는 대량의 데이터를 대규모로 처리할 수 있으며 성능 및 비용 최적화되어 있기 때문에 검색 및 조직의 가치 실현 시간을 단축해 줍니다.

EDA(전자 설계 자동화)

EDA는 실리콘 칩 생산의 설계 단계에서 성능 및 오류를 시뮬레이션하는 데 사용되는 고성능 애플리케이션입니다. FSx for Lustre는 빠르게 혁신하고, 새로운 제품을 설계 및 확인하고, 수요에 맞춰 조정할 수 있는 성능과 유연성을 제공해줍니다.

Product-Page_Standard-Icons_01_Product-Features_SqInk
Amazon FSx for Lustre 기능 확인

Amazon FSx for Lustre의 주요 기능에 대해 자세히 알아보십시오.

자세히 알아보기 
Product-Page_Standard-Icons_02_Sign-Up_SqInk
무료 계정에 가입

AWS 프리 티어에 즉시 액세스할 수 있습니다. 

가입하기 
Product-Page_Standard-Icons_03_Start-Building_SqInk
콘솔에서 구축 시작

AWS 콘솔에서 Amazon FSx for Lustre 구축을 시작하십시오.

로그인