Amazon Web Services 한국 블로그

Amazon EFS Archive – 거의 접근하지 않는 파일 스토리지 비용 최적화

오늘 AWS는 거의 액세스되지 않는 장기 저장 데이터에 최적화된 Amazon Elastic File System(Amazon EFS)의 새로운 스토리지 클래스인 EFS Archive를 출시합니다.

이번 출시로 Amazon EFS는 세 가지 리전별 스토리지 클래스를 지원하게 되었습니다.

  • EFS Standard – SSD 스토리지로 구동되며 활성 데이터에 대해 밀리초 미만의 지연 시간을 제공하도록 설계되었습니다.
  • EFS Infrequent Access(EFS IA) – 분기에 몇 번만 액세스되고 EFS Standard의 밀리초 미만의 지연 시간이 요구되지 않는 데이터에 대해 비용이 최적화된 클래스입니다.
  • EFS Archive – 1년에 몇 번 또는 그 이하로 액세스되는 장기 저장 데이터에 대해 비용이 최적화된 클래스로, EFS IA와 유사한 성능을 제공합니다.

모든 리전별 스토리지 클래스는 초당 기가바이트의 처리량과 수십만 IOPS의 성능을 제공하며 99.999999999%의 내구성을 제공하도록 설계되었습니다.

EFS 수명 주기 관리 기능이 액세스 패턴을 기반으로 스토리지 클래스 간에 파일을 자동으로 마이그레이션하므로, 파일 시스템의 스토리지 클래스를 수동으로 선택할 필요가 없습니다. 따라서 지연 시간에 민감한 활성 데이터부터 거의 액세스되지 않는 콜드 데이터까지 매우 다양한 방식으로 처리되는 여러 파일이 포함된 단일 공유 파일 시스템을 구축할 수 있습니다.

인사이트를 생성하는 데 유용하지만 자주 사용되지는 않는 일부 데이터가 포함된 데이터 세트가 많습니다. EFS Archive를 사용하면 거의 액세스되지 않는 데이터를 다른 데이터와 동일한 공유 파일 시스템에 보관하면서 비용 효율적으로 저장할 수 있습니다. 이 간소화된 스토리지 접근 방식을 통해 최종 사용자와 애플리케이션이 한곳에서 대규모 공유 데이터 세트에 대한 작업을 공동으로 수행할 수 있으므로, 분석 워크로드를 더 쉽고 빠르게 설정하고 규모 조정할 수 있습니다.

EFS Archive를 사용하면 사용자 공유, 기계 학습(ML) 훈련 데이터 세트, SaaS 애플리케이션, 금융 거래 및 의료 기록과 같은 규제 준수를 위해 보존된 데이터 등, 활성 및 비활성 데이터가 혼합되어 있는 대용량 파일 기반 데이터 세트를 사용할 때 워크로드 비용을 최적화할 수 있습니다.

이제 실제로 어떻게 작동하는지 알아보겠습니다.

EFS Archive 스토리지 사용
새로운 EFS Archive 스토리지 클래스를 사용하려면 파일 시스템에 대한 수명 주기 관리를 구성해야 합니다. Amazon EFS 콘솔에서 파일 시스템 중 하나를 선택하고 편집을 선택합니다. EFS Archive 스토리지를 사용하려면 파일 시스템 처리량 모드가 Elastic으로 설정되어 있어야 합니다. Elastic Throughput은 사용량에 따라 요금을 지불하는 방식으로 애플리케이션에 필요한 만큼의 처리량을 제공하도록 설계되었으므로, 대부분의 워크로드에 권장되는 옵션입니다.

콘솔 스크린샷.

이제 워크로드의 액세스 패턴에 따라 파일을 EFS IA 또는 EFS Archive로 전환하도록 수명 주기 관리를 구성합니다.

콘솔 스크린샷.

이 예의 워크로드에는 한 달 이상 지난 파일이 거의 사용되지 않습니다. 3개월 이상 지난 파일은 통상적인 작업에 사용되지 않지만 더 오랫동안 보관해야 합니다. 이러한 고려 사항에 따라, 마지막으로 액세스한 지 30일이 지난 후에는 파일을 EFS IA로, 90일이 지난 후에는 EFS Archive로 자동 전환하도록 선택했습니다. 새 파일 시스템의 기본 설정은 이와 같습니다.

이전 파일 중 하나에 액세스하는 경우에는 일반적으로 새 분석에 사용된다는 의미이므로 일정 기간 동안 다시 활성화됩니다. 이러한 이유로 IA 또는 아카이브 스토리지에 처음 액세스할 때 파일을 Standard 스토리지로 다시 전환하는 옵션을 사용합니다.

변경 사항을 저장하면 끝입니다! 이제 이 파일 시스템은 애플리케이션에서 파일을 처리하는 방식에 따라 자동으로 다른 스토리지 클래스를 사용합니다.

알아야 할 사항
EFS 아카이브는 현재 중국의 리전을 제외하고 Amazon EFS가 제공되는 모든 AWS 리전에서 사용할 수 있습니다.

EFS Archive는 EFS IA보다 50% 저렴한 스토리지 비용과 데이터 액세스 시 3배 높은 요청 요금으로, 사용 빈도와 액세스 빈도가 낮은 파일에 대해 비용이 보다 최적화된 환경을 제공합니다. 자세한 내용은 Amazon EFS 요금을 참조하세요.

파일 시스템 수명 주기 정책을 구성하여 기존 파일 시스템에 EFS Archive를 사용할 수 있습니다. 새 파일 시스템은 기본적으로 마지막으로 액세스한 지 30일이 지나면 파일을 EFS IA로, 90일이 지나면 EFS Archive로 자동으로 전환하는 수명 주기 정책을 사용하여 생성됩니다.

Amazon EFS 파일 시스템의 수명 주기 관리를 구성하여 스토리지 비용을 최적화합니다.

— Danilo