Amazon SageMaker HyperPod, 영구 스토리지를 위한 Amazon EBS CSI 드라이버 지원
이제 Amazon SageMaker HyperPod가 Amazon Elastic Block Store(Amazon EBS) Container Storage Interface(CSI) 드라이버를 지원합니다. 따라서 고객은 SageMaker HyperPod EKS 클러스터에서 기계 학습 워크로드를 위한 영구 스토리지를 동적으로 프로비저닝하고 관리할 수 있게 되었습니다. 이 기능을 사용하면 Kubernetes 영구 볼륨 클레임을 통해 EBS 볼륨을 생성, 연결, 관리할 수 있으며, 포드가 다시 시작되고 노드가 교체되어도 지속되는 스토리지를 제공할 수 있습니다. 훈련 및 추론 워크로드를 배포하는 고객은 스토리지를 유연하게 할당하면서 동시에 뛰어난 성능을 유지할 필요가 있지만, 기존에는 Kubernetes 워크플로 외부에서 수동으로 EBS 볼륨을 관리해야 했습니다.
EBS CSI 드라이버가 지원됨에 따라 모델 요구 사항에 따라 동적으로 볼륨을 프로비저닝하고, 서비스 중단 없이 볼륨 크기를 조정하며, 백업 및 복구를 위한 스냅샷을 생성할 수 있게 되었습니다. 훈련 워크로드의 경우, 데이터세트, 모델 체크포인트, 공유 아티팩트를 위한 영구 스토리지를 제공합니다. 추론 워크로드의 경우, 모델 스토리지를 프로비저닝하고, 캐싱 볼륨을 생성하고, 이벤트 로깅을 유지할 수 있습니다. 이번 통합은 Kubernetes 스토리지 클래스를 통한 정적 프로비저닝과 동적 프로비저닝을 모두 지원하여 스토리지 비용과 성능이 최적화됩니다.
시작하려면 HyperPod EKS 클러스터에 Amazon EBS CSI 드라이버를 EKS 애드온으로 설치한 후, 표준 Kubernetes 영구 볼륨 클레임 및 스토리지 클래스를 사용하여 EBS 볼륨을 프로비저닝하면 됩니다. EBS CSI 드라이버는 EBS 볼륨의 생성, 연결, 마운트, 정리 등 전체 수명 주기를 관리합니다. 고객 관리형 KMS 키를 사용한 볼륨 암호화가 지원되며, 표준 Kubernetes 작업을 통해 볼륨 크기를 조정하고 스냅샷을 생성할 수 있습니다.
이 기능은 SageMaker HyperPod EKS 클러스터가 지원되는 모든 AWS 리전에서 사용할 수 있습니다. EBS CSI 드라이버 지원에 대한 자세한 내용은 Amazon SageMaker HyperPod 사용 설명서에서 확인하세요.