AWS Toplu İşlem artık çok düğümlü paralel işler kullanarak Amazon EKS'de toplu planlamayı destekliyor

Yayınlanma Tarihi: 11 Tem 2024

Bugün AWS, Amazon Esnek Kubernetes Hizmeti (Amazon EKS) üzerindeki AWS Toplu İşlem'de Çok Düğümlü Paralel (MNP) işlerinin genel olarak kullanılabilirliğini duyurdu. AWS Toplu İşlem MNP işleri ile çok katmanlı AI/ML modellerini eğitmek gibi sıkı bağlantılı Yüksek Performanslı Bilgi İşlem (HPC) uygulamaları çalıştırabilirsiniz. AWS Toplu İşlem, Amazon EKS kümenizdeki düğümleri manuel müdahale olmadan başlatmanıza, yapılandırmanıza ve yönetmenize yardımcı olur.

MNP işlerini RegisterJobsDefinition API'sini kullanarak veya AWS Toplu İşlem Yönetim Konsolu'nun iş tanımları bölümleri aracılığıyla yapılandırabilirsiniz. MNP işleri ile AWS Toplu İşlem'i birden çok Amazon Elastic Compute Cloud (Amazon EC2) bulut sunucusunu kapsayan Amazon EKS iş yüklerinde çalıştırabilirsiniz. AWS Toplu İşlem MNP işleri, NVIDIA Toplu İletişim Kitaplığı (NCCL), Gloo, Mesaj İletim Arayüzü (MPI) veya Birleştirilmiş Kolektif İletişim (UCC) gibi IP tabanlı tüm örnekler arası iletişim çerçevelerinin yanı sıra PyTorch ve Dask gibi makine öğrenimi ve paralel hesaplama kitaplıklarını destekler. Daha fazla bilgi için AWS Toplu İşlem Kullanıcı Kılavuzu'ndaki Çok Düğümlü Paralel işler sayfasına bakın.

AWS Toplu İşlem, geliştiricileri, bilim insanlarını ve mühendisleri ML modeli eğitimi, simülasyonları ve analizi için her ölçekte verimli toplu işlemler yürütme konusunda destekler. Çoklu Düğümlü Paralel işler, AWS Toplu İşlem'in kullanılabildiği tüm AWS Bölgelerinde kullanılabilir.