Amazon FSx for Lustre

Amazon S3 또는 온프레미스 데이터 처리를 위한 고성능 파일 시스템

Amazon FSx for Lustre는 기계 학습, HPC(고성능 컴퓨팅), 동영상 처리, 금융 모델링, 전자 설계 자동화(EDA) 같은 워크로드를 빠르게 처리하도록 최적화된 고성능 파일 시스템을 제공합니다. 이러한 워크로드는 대개 빠르고 확장 가능한 파일 시스템 인터페이스를 통해 데이터를 표시해야 하며, 일반적으로 Amazon S3 등 장기적 데이터 스토어에 저장된 데이터 세트가 있습니다.

고성능 파일 시스템을 운영하려면 일반적으로 전문 지식과 관리 오버헤드가 필요하며, 스토리지 서버를 프로비저닝하고 복잡한 성능 파라미터를 조정해야 합니다. Amazon FSx를 활용하면 데이터에 1밀리초 미만의 지연 시간으로 데이터에 액세스하고 초당 최대 수백 기가바이트의 처리량과 몇 백만 IOPS의 속도로 데이터를 읽고 쓸 수 있도록 하는 파일 시스템을 시작 및 실행할 수 있습니다.

Amazon FSx for Lustre는 Amazon S3와 기본적으로 연동되므로 고성능 파일 시스템으로 클라우드 데이터 세트를 손쉽게 처리할 수 있습니다. FSx for Lustre 파일 시스템을 S3 버킷과 연결하는 경우 S3 객체가 파일로 투명하게 표시되며 결과를 다시 S3에 쓸 수 있습니다. FSx for Lustre를 독립 실행형 고성능 파일 시스템으로 사용하여 워크로드를 온프레미스에서 클라우드로 제공할 수도 있습니다. FSx for Lustre 파일 시스템에 온프레미스 데이터를 복사하면 AWS에서 실행되는 컴퓨팅 인스턴스에 의해 빠른 처리에 데이터를 사용할 수 있습니다. Amazon FSx를 사용하면, 사용한 리소스에 대해서만 비용을 지불하면 되며, 최소 약정, 초기 하드웨어나 소프트웨어 비용 또는 추가 요금이 없습니다.

Amazon FSx for Lustre 개요

이점

뛰어난 성능 및 확장성

Amazon FSx for Lustre는 광범위한 고성능 워크로드를 충족할 수 있는 성능을 제공합니다. FSx for Lustre의 기반이 되는 Lustre는 데이터 처리에 최적화된 인기 있는 고성능 파일 시스템으로, 1밀리초 미만의 지연 시간과 초당 수백 기가바이트로 확장되는 처리량이 특징입니다.

S3 또는 온프레미스 데이터에 원활하게 액세스

Amazon FSx는 Amazon S3와 기본적으로 연동되므로 고성능 POSIX 인터페이스를 통해 S3 데이터를 손쉽게 처리할 수 있습니다. FSx for Lustre를 S3 버킷에 연결하면 S3 객체가 파일로 투명하게 표시됩니다. FSx for Lustre를 활용하면 파일 시스템의 변경된 데이터와 새 데이터를 S3 버킷에 언제든지 다시 쓸 수 있습니다. 또한 Amazon Direct Connect 또는 VPN을 통해 온프레미스 워크로드를 클라우드에 제공할 수도 있습니다. 

완전관리형

Amazon FSx는 완벽하게 관리되므로 클라우드에서 고성능 파일 시스템을 쉽게 시작 및 실행할 수 있습니다. 더 이상 하드웨어 프로비저닝 및 유지 관리, 소프트웨어 구성 및 파일 시스템의 복잡한 성능 튜닝에 대해 걱정할 필요가 없습니다. AWS Management Console, AWS CLI 또는 AWS SDK를 사용하여 몇 분 만에 Amazon FSx 파일 시스템을 생성하고 시작할 수 있습니다.

비용 효율성

Amazon FSx for Lustre는 고성능 워크로드에 대해 스토리지 비용을 손쉽게 최적화할 수 있게 해 줍니다. 장기간의 데이터를 Amazon S3 또는 기타 저렴한 장기적 데이터 스토어에 안정적으로 저장하여 데이터 처리를 위한 저렴하고 성능이 뛰어난 스토리지를 제공합니다. FSx for Lustre는 뛰어난 성능 덕분에 데이터 처리 워크로드를 더 빨리 실행하여 컴퓨팅 리소스에 드는 시간과 비용을 줄여 줍니다. FSx for Lustre는 사용한 리소스에 대해서만 비용을 지불하면 되며, 최소 약정이나 선수금은 없습니다.

네이티브 파일 시스템 인터페이스

Amazon FSx for Lustre는 POSIX와 호환되므로, 특별히 변경하지 않아도 현재 Linux 기반 애플리케이션을 사용할 수 있습니다. FSx for Lustre는네이티브 파일 시스템 인터페이스를 제공하며 Linux 운영 체제에서 수행하는 파일 시스템처럼 작동합니다. 또한 읽기 후 쓰기 일관성 확인 기능을 제공하고 파일 잠금을 지원합니다. FSx for Lustre 파일 시스템에 대한 액세스는 POSIX 권한 및 Amazon Virtual Private Cloud(VPC) 권한으로 제어할 수 있습니다.

보안 및 규정 준수

Amazon FSx는 저장 데이터를 자동으로 암호화합니다. 규제 적용 대상이라면, PCI-DSS, ISO 및 SCO를 준수하며, HIPAA 적격 서비스이기도 한 FSx for Lustre를 사용하면 됩니다. Amazon FSx는 Amazon Virtual Private Cloud(VPC)를 지원하므로 FSx for Lustre 파일 시스템 리소스를 가상 네트워크에서 시작할 수 있습니다.

작동 방식

FSx_Lustre_diagram

사용 사례

기계 학습

기계 학습 워크로드는 막대한 양의 교육 데이터를 사용합니다. 이러한 워크로드는 여러 컴퓨팅 인스턴스가 동시에 교육 데이터 세트를 처리해야 하므로 공유 파일 스토리지를 사용하는 경우가 많습니다. Amazon FSx는 ML 교육 데이터 세트를 처리하기 위해 높은 처리량 및 일관성 있고 낮은 지연 시간을 갖춘 공유 파일 스토리지를 제공하므로 기계 학습 워크로드에 이상적입니다.

HPC(고성능 컴퓨팅)

HPC(고성능 컴퓨팅)를 사용하면 과학자와 엔지니어가 복잡하고 컴퓨팅 집약적인 문제를 해결할 수 있습니다. 석유 및 가스 발견과 유전체학 등의 HPC 워크로드는 높은 수준의 처리량으로 여러 컴퓨팅 인스턴스에서 액세스해야 하는 막대한 양의 데이터를 처리합니다. Amazon FSx는 이러한 HPC 워크로드에 적합한데, 수천 개의 EC2 인스턴스 전체에서 파일 시스템 액세스를 통해 짧게 수행되는 고성능 워크로드의 성능과 비용에 최적화된 파일 시스템을 제공하기 때문입니다.

미디어 처리 및 트랜스코딩

동영상 렌더링, 시각 효과 및 미디어 제작과 같은 미디어 데이터 처리 워크플로에서는 대량으로 생성된 데이터를 처리할 수 있는 컴퓨팅 및 스토리지 리소스를 필요로 합니다. Amazon FSx는 디지털 미디어 파일 처리, 배포 및 분석에 필요한 고성능을 제공하며, 지연 시간도 짧습니다.

자율 주행 차량

자율 주행 차량 시스템을 개발하는 고객은 차량 안전을 확보하기 위해 대규모 차량 센서 및 카메라 데이터에 대한 교육을 진행하고 시뮬레이션을 실행하는 방식으로 모델을 테스트하는 경우가 많습니다. Amazon FSx for Lustre를 활용하면 1밀리초 미만의 지연 시간, 초당 수백 기가바이트의 처리량, 수천 IOPS로 표준 파일 시스템을 통해 수백 개의 노드에서 동시에 이러한 데이터에 액세스할 수 있습니다. 또한 시뮬레이션을 대규모로 실행하여 주당 수천 개의 시뮬레이션된 실행을 확보하고 모델 개발 속도를 높일 수 있습니다.

빅 데이터 분석

부정 탐지, 재무 분석 같은 빅 데이터 분석 사용 사례에서는 대량의 데이터를 생성하므로, 데이터 집약적 애플리케이션을 지원할 고성능 스토리지가 필요합니다. 급증하는 데이터 볼륨을 관리하는 것은 비용이 많이 들고 복잡할 수 있습니다. Amazon FSx for Lustre는 최적화된 성능과 비용을 통해 검색 시간을 단축해주고 조직에 가치를 제공합니다.

전자 설계 자동화(EDA)

EDA는 실리콘 칩 생산의 설계 단계에서 성능 및 오류를 시뮬레이션하는 데 사용되는 일반적인 고성능 애플리케이션입니다. FSx for Lustre는 빠르게 혁신하고, 새로운 제품을 설계 및 확인하고, 수요에 맞춰 조정할 수 있는 성능과 유연성을 제공해줍니다.

Product-Page_Standard-Icons_01_Product-Features_SqInk
Amazon FSx for Lustre 기능 확인

Amazon FSx for Lustre의 주요 기능에 대해 자세히 알아보십시오.

자세히 알아보기 
Product-Page_Standard-Icons_02_Sign-Up_SqInk
무료 계정에 가입

AWS 프리 티어에 즉시 액세스할 수 있습니다. 

가입하기 
Product-Page_Standard-Icons_03_Start-Building_SqInk
콘솔에서 구축 시작

AWS 콘솔에서 Amazon FSx for Lustre 구축을 시작하십시오.

로그인