Amazon FSx for Lustre

コンピューティングワークロードを強化する高速でスケーラブルな共有ストレージ

Amazon FSx for Lustre は、コスト効率が高い、高性能ストレージをコンピューティングワークロード向けに提供する、フルマネージド型サービスです。機械学習、高性能コンピューティング (HPC)、ビデオレンダリング、金融シミュレーションといった多くのワークロードは、高性能共有ストレージを介して同じデータセットにアクセスするコンピューティングインスタンスに依存しています。

世界で最も人気のある高性能ファイルシステムである Lustre を使用した FSx for Lustre では、ミリ秒未満のレイテンシー、1 秒間に最大で数百ギガバイトのスループット、百万単位の IOPS を提供します。複数のデプロイオプションやストレージタイプを提供しているため、ワークロード要件に合わせてコストやパフォーマンスを最適化できます。

FSx for Lustre ファイルシステムは、Amazon S3 バケットとリンクさせることもできます。それにより、高性能ファイルシステムと S3 API 両方からのデータに同時にアクセスして処理することが可能です。

Amazon FSx for Lustre の概要

利点

高性能でスケーラブル

Amazon FSx for Lustre では、幅広い種類の高性能ワークロードを満たすパフォーマンスが提供されます。Lustre ファイルシステムは、データ処理用に最適化されており、ミリ秒未満のレイテンシーと 1 秒間に最大で数百ギガバイトのスループットを提供します。数回クリックするだけで、何万ものコンピューティングインスタンスから高性能共有ストレージにアクセスできます。

使いやすい S3 データ

Amazon FSx for Lustre で、S3 のクラウドデータセットを簡単に処理できます。S3 バケットとリンクさせると、FSx for Lustre によりオブジェクトはファイルとして透過的に表示されます。それにより、S3 からのデータ転送を管理しなくてもワークロードを実行できます。S3 バケットのコンテンツが変更されると、ワークロードの実行に使用できる最新のデータに基づいて、FSx for Lustre でファイルシステムが自動的に更新されます。

コスト効率が高い

Amazon FSx for Lustre では、価格やパフォーマンスを最適化できるようにさまざまなストレージオプションを提供しています。ソリッドステートドライブ (SSD) ストレージは、レイテンシーの影響を受けやすいワークロード向けに最適化されています。ハードディスクドライブ (HDD) ストレージは、スループット重視のワークロード向けに最適化されています。レプリケートされていないスクラッチファイルシステムを選択して、データの短期的な処理コストをさらに削減することもできます。 

あらゆる Linux ワークロードのための設計

Amazon FSx for Lustre は、POSIX 互換のため、現在の Linux ベースのアプリケーションに変更を加えることなく使用できます。FSx for Lustre はネイティブファイルシステムインターフェイスを提供し、Linux オペレーティングシステムで他のファイルシステムと同様に機能します。また、書き込み後の読み取りの整合性を提供し、ファイルのロックをサポートします。ファイルシステムへは、Amazon EC2 インスタンスや Amazon EKS クラスターから、および AWS Direct Connect や AWS VPN を使用してオンプレミスからアクセスできます。

シンプルでフルマネージド型

Amazon FSx for Lustre を使用すると、クラウドで高性能の Lustre ファイルシステムを簡単に起動して実行できます。ハードウェアのプロビジョニングやメンテナンス、ソフトウェアの構成、バックアップ管理、ストレージ消費のモニタリング、ファイルシステムの複雑なパフォーマンスチューニングについて頭を悩ます必要がなくなります。AWS マネジメントコンソール、AWS CLI、または AWS SDK を使用して、数分で Amazon FSx for Lustre ファイルシステムを作成して開始できます。

安全性とコンプライアンス

Amazon FSx for Lustre は、保管中および転送中のデータを自動的に暗号化します。FSx for Lustre は PCI-DSS、ISO、SOC に準拠し、HIPAA に対応しています。POSIX パーミッションや Amazon Virtual Private Cloud (VPC) セキュリティグループルールを使用して、ネットワークアクセスを制御することができます。データ保護要件を満たすために、AWS Backup を使用して、S3 永続データリポジトリにリンクされていない永続的な FSx for Lustre ファイルシステムのバックアップとコンプライアンスの管理を一元化することもできます。

ユースケース

Machine learning

機械学習のワークロードでは、大量のトレーニングデータを使用します。複数のコンピューティングインスタンスがトレーニングデータセットを同時に処理する必要があるため、これらのワークロードでは多くの場合共有ファイルストレージを使用します。FSx for Lustre は、機械学習トレーニングデータセットを処理するための高スループットと一貫した低レイテンシーを備えた共有ファイルストレージを提供するため、機械学習ワークロードに最適です。FSx for Lustre は Amazon SageMaker とも統合されているため、トレーニングジョブを加速できます。

ハイパフォーマンスコンピューティング

ハイパフォーマンスコンピューティング (HPC) により、科学者とエンジニアは、複雑でコンピューティング負荷の高い問題を解決できます。石油、ガスの発見やゲノム解析などの HPC ワークロードでは、複数のコンピューティングインスタンスがアクセスする必要のある大量のデータを、高レベルのスループットで処理します。FSx for Lustre は、数千の EC2 インスタンスからのファイルシステムへのアクセスにより、高性能なワークロードのパフォーマンスとコストのために最適化されたファイルシステムを提供するため、HPC および科学コンピューティングワークロードに理想的です。FSx for Lustre は AWS ParallelCluster および AWS Batch と統合されるため、HPC ワークロードで簡単に使用できます。

メディア処理とトランスコーディング

ビデオレンダリング、視覚効果、メディア制作などのメディアデータ処理ワークフローでは、作成される大量のデータを処理するためのコンピューティングとストレージリソースが必要です。FSx for Lustre では、デジタルメディアファイルの処理、配信、分析に必要な高い性能と低いレイテンシーが提供されます。

自動走行車

自動走行車システムを開発しているお客様は、車両の安全性を確保するため、シミュレーションを実行し、大量の車両センサーおよびカメラデータをトレーニングすることによって頻繁にモデルをテストしています。FSx for Lustre を使用すると、高レベルのパフォーマンスで数千のノードからそのデータに同時にアクセスできるため、大規模なシミュレーションをより簡単に実行でき、モデル開発を加速できます。

ビッグデータと財務分析

SAS Grid のワークロードや財務分析などのビッグデータ分析のユースケースでは、データ集約型アプリケーションを実行するために、高性能ストレージを必要とする大量のデータが生成されます。増え続けるデータの処理は、コストがかかり複雑になる可能性があります。Amazon FSx for Lustre は大量のデータを大規模に処理でき、パフォーマンスとコストが最適化されているため、検出までの時間を短縮でき、組織に価値をもたらします。

電子設計オートメーション

電子設計オートメーション (EDA) は、シリコンチップ製造の設計段階でパフォーマンスや障害をシミュレートするために使用される高性能アプリケーションです。FSx for Lustre は、迅速なイノベーション、新しい製品の設計と検証、需要に合わせたスケールを可能にするパフォーマンスと柔軟性を提供します。

Product-Page_Standard-Icons_01_Product-Features_SqInk
Amazon FSx for Lustre の特徴を見る

Amazon FSx for Lustre の主な機能をご覧ください。

詳細 
Product-Page_Standard-Icons_02_Sign-Up_SqInk
無料のアカウントにサインアップ

AWS 無料利用枠にすぐにアクセスできます。 

サインアップ 
Product-Page_Standard-Icons_03_Start-Building_SqInk
AWS コンソールで構築を開始する

AWS コンソールで Amazon FSx for Lustre を使って構築を始めましょう。

サインイン