Amazon SageMaker HyperPod 現在支援用於持久性儲存的 Amazon EBS CSI 驅動程式
Amazon SageMaker HyperPod 現在支援 Amazon Elastic Block Store (EBS) Container Storage Interface (CSI) 驅動程式,使客戶得以動態佈建和管理 SageMaker HyperPod EKS 叢集上的機器學習工作負載持久性儲存空間。此功能可讓客戶透過 Kubernetes 持久性磁碟區宣告來建立、附加和管理 EBS 磁碟區,進而在 Pod 重新啟動和節點取代時提供持久性儲存空間。部署訓練和推論工作負載的客戶,需要在擁有彈性儲存空間配置的同時維持高效能,但在此功能推出之前,需要在 Kubernetes 工作流程之外進行手動 EBS 磁碟區管理。
EBS CSI 驅動程式支援使客戶得以根據模型需求動態佈建磁碟區、在不中斷服務的情況下調整磁碟區大小,並且建立備份和復原的快照。在進行訓練工作負載時,這項功能可為資料集、模型檢查點和共用成品提供持久性儲存空間。在進行推論工作負載時,客戶能夠佈建模型儲存空間、建立快取磁碟區,並且維護事件日誌。該整合能夠透過 Kubernetes 儲存類別支援靜態和動態佈建作業,最佳化儲存成本和效能。
若要著手使用,請以 EKS 附加元件的形式將 Amazon EBS CSI 驅動程式安裝在 HyperPod EKS 叢集上,然後使用標準 Kubernetes 持久性磁碟區宣告和儲存類別來佈建 EBS 磁碟區。EBS CSI 驅動程式能夠管理包括建立、附加、掛載和清除在內的 EBS 磁碟區完整生命週期。同時支援使用客戶自管 KMS 金鑰進行磁碟區加密,並且可以透過標準 Kubernetes 作業調整磁碟區大小和製作快照。
此功能適用於支援 SageMaker HyperPod EKS 叢集的所有 AWS 區域。若要進一步了解 EBS CSI 驅動程式支援,請參閱 Amazon SageMaker HyperPod 使用者指南。