게시된 날짜: Feb 6, 2019
기계 학습, 고성능 컴퓨팅, 분석 및 기타 데이터 처리 워크로드를 위한 고성능 파일 시스템인 Amazon FSx for Lustre를 사용하면, 결과를 S3에 다시 쓰는 새로운 옵션과 FSx for Lustre와 S3 간에 최대 2배 빠른 데이터 전송 속도를 통해 Amazon S3에 상주하는 데이터를 더 쉽게 처리할 수 있습니다.
데이터 처리 워크로드는 일반적으로 빠르고 확장 가능한 POSIX 파일 시스템 인터페이스를 통해 데이터를 표시해야 하며, 일반적으로 Amazon S3에 저장된 입력 데이터 세트가 있습니다. FSx for Lustre를 사용하면 Amazon S3 데이터에 연결된 성능이 뛰어나고 확장 가능한 파일 시스템을 쉽고 빠르게 구동하고, S3 객체에 파일로 투명하게 액세스하고, 결과를 다시 S3에 쓴 다음, 파일 시스템을 종료할 수 있습니다.
이전에는 FSx for Lustre 파일 시스템에서 S3로 결과를 다시 쓰는 경우, 변경된 파일 또는 새로운 파일인 S3 버킷 내 사전에 정의된 위치에 새로운 객체로 쓰여집니다. 이제 Amazon S3 버킷의 원래 객체에 덮어쓰거나 새로운 파일 또는 변경된 파일을 지정한 접두사에 쓸 수 있습니다. 이러한 옵션을 통해 좀 더 유연하게 FSx for Lustre를 데이터 처리 워크플로에 통합할 수 있습니다.
또한, Amazon FSx for Lustre에서는 이제 Amazon S3 버킷과 FSx for Lustre 파일 시스템 간에 최대 2배 빠른 데이터 전송 속도를 제공하므로 처리 워크로드를 훨씬 빠르게 완료할 수 있습니다.
이러한 향상된 기능은 FSx for Lustre가 제공되는 모든 리전의 모든 새로운 파일 시스템에서 사용할 수 있습니다. 결과를 S3에 쓰는 새로운 옵션에 대해 자세히 알아보고 FSx for Lustre 성능에 대해 자세히 알아보십시오.