Amazon FSx для Lustre
Ускорьте рабочие нагрузки искусственного интеллекта, машинного обучения и высокопроизводительных вычислений с помощью самого быстрого хранилища для инстансов графических процессоров в облаке
Почему стоит использовать Amazon FSx для Lustre?
Amazon FSx for Lustre — это полностью управляемый сервис, предоставляющий высокопроизводительное, экономичное и масштабируемое хранилище на базе Lustre, самой популярной в мире высокопроизводительной файловой системы. FSx for Lustre обеспечивает самую высокую производительность хранения инстансов графических процессоров в облаке: пропускная способность до терабайт в секунду, миллионы операций ввода-вывода в секунду, задержки менее миллисекунд и практически неограниченная емкость хранилища. Оно обеспечивает на 34% более высокую цену и производительность по сравнению с локальным хранилищем файлов на жестких дисках и на 70% более выгодное соотношение цены и качества по сравнению с другими высокопроизводительными файловыми системами в облаке.
Преимущества FSx для Lustre
Ускорьте рабочие нагрузки искусственного интеллекта, машинного обучения и высокопроизводительных вычислений, используя самую высокую производительность хранилища для инстансов графических процессоров в облаке, обеспечивающую пропускную способность до 1200 Гбит/с на каждого клиента благодаря адаптеру Elastic Fabric Adapter и NVIDIA GPUDirect Storage.
СХД класса FSx for Lustre Intelligent-Tiering, стоимость которого составляет менее 0,005 долларов США за гигабайт в месяц, позволяет снизить затраты, взимая плату только за хранящиеся данные и автоматически распределяя их между уровнями частого доступа, нечастого доступа и архивирования.
Единственная полностью эластичная файловая система Lustre автоматически масштабируется в большую или меньшую сторону в зависимости от ваших потребностей и взимает плату только за сохраненные данные. Вам не нужно беспокоиться о нехватке ресурсов, обновлении оборудования, управлении файловыми серверами, настройке программного обеспечения или настройке производительности. Amazon FSx for Lustre полностью управляется и автоматизирует эти трудоемкие административные задачи.
Получайте доступ к данным Amazon Simple Storage Service (Amazon S3) и обрабатывайте их из высокопроизводительной файловой системы, связывая файловые системы с корзинами S3. Amazon FSx for Lustre также изначально интегрируется с Amazon SageMaker HyperPod, обеспечивая быстрое хранилище для рабочих нагрузок машинного обучения (ML) и интегрируется с сервисами AWS, включая Amazon EKS, AWS Backup, AWS ParallelCluster, Amazon CloudWatch и IAM, для комплексной оркестрации, мониторинга и безопасности.
Примеры использования
Ускорьте загрузку данных машинного обучения, контрольную точку модели, операции логического вывода и кэширование ключевых значений (KV) с помощью самого быстрого хранилища для инстансов GPU в облаке.
Обеспечьте пропускную способность в терабайтах в секунду и миллионы операций ввода-вывода в секунду для обеспечения высокопроизводительных рабочих нагрузок.
Ускорьте количественный анализ и моделирование рисков, обрабатывая огромные наборы финансовых данных на высоких скоростях.
Ускорьте геномный анализ и крио-ЭМ-анализ с помощью высокопроизводительного хранилища, предназначенного для рабочих процессов HCLS.
Обеспечьте точные прогнозы погоды с помощью высокопроизводительного хранилища для обработки метеорологических моделей.