Amazon SageMaker HyperPod artık kalıcı depolama için Amazon EBS CSI sürücüsünü destekliyor
Amazon SageMaker HyperPod artık Amazon Esnek Blok Deposu (EBS) Container Depolama Arabirimi (CSI) sürücüsünü destekleyerek müşterilerin SageMaker HyperPod EKS kümelerinde makine öğrenimi iş yükleri için kalıcı depolamayı dinamik olarak temin etmesine ve yönetmesine olanak tanır. Bu özellik, müşterilerin Kubernetes kalıcı birim talepleri aracılığıyla EBS birimleri oluşturmasına, eklemesine ve yönetmesine olanak tanıyarak pod yeniden başlatmaları ve düğüm değiştirmeleri arasında kalıcı depolama sağlar. Eğitim ve çıkarım iş yüklerini dağıtan müşteriler yüksek performansı korurken esnek depolama tahsisine ihtiyaç duyarlar ama bundan önce Kubernetes iş akışlarının dışında manuel EBS birim yönetimi yapmaları gerekiyordu.
EBS CSI sürücü desteği, müşterilerin model gereksinimlerine göre birimleri dinamik olarak tedarik etmesine, hizmet kesintisi olmadan birimleri yeniden boyutlandırmasına ve yedekleme ve kurtarma için anlık görüntüler oluşturmasına olanak tanır. Bu, eğitim iş yüklerinde, veri kümeleri, model kontrol noktaları ve paylaşılan yapıtlar için kalıcı depolama sağlar. Çıkarım iş yükleri için müşteriler model depolama tedarik edebilir, önbelleğe alma birimleri oluşturabilir ve olay günlüğünü koruyabilir. Entegrasyon, Kubernetes depolama sınıfları aracılığıyla hem statik hem de dinamik tedariği destekleyerek depolama maliyetlerini ve performansını optimize eder.
Başlamak için Amazon EBS CSI sürücüsünü HyperPod EKS kümenize EKS eklentisi olarak yükleyin, ardından standart Kubernetes kalıcı birim taleplerini ve depolama sınıflarını kullanarak EBS birimlerini tedarik edin. EBS CSI sürücüsü, oluşturma, bağlama, montaj ve temizleme dahil olmak üzere EBS birimlerinin tüm yaşam döngüsünü yönetir. Müşteri tarafından yönetilen KMS anahtarlarıyla birim şifrelemesi desteklenir ve standart Kubernetes işlemleriyle birimler yeniden boyutlandırılabilir ve anlık görüntüleri alınabilir.
Bu özellik, SageMaker HyperPod EKS kümelerinin desteklendiği tüm AWS Bölgelerinde kullanılabilir. Özel EBI CSI sürücü desteği hakkında daha fazla bilgi edinmek için Amazon SageMaker HyperPod Kullanıcı Kılavuzu'na bakın.