投稿日: Dec 23, 2019
機械学習、ハイパフォーマンスコンピューティング、ビデオ処理、財務モデリング、電子設計オートメーション、分析などのワークロードのために最適化されたハイパフォーマンスファイルシステムである Amazon FSx for Lustre に、Amazon FSx と Amazon S3 との間におけるファイルデータとファイルに対するアクセス権限の同期をより簡単にする機能を追加しました。さらに、Amazon FSx は、S3 バケットにリンクされている FSx ファイルシステムの起動速度を 4 倍にしました。
Amazon FSx for Lustre は Amazon S3 とネイティブに連携し、ハイパフォーマンスファイルシステムを使用したクラウドデータセットの処理を簡単にします。S3 バケットとリンクさせると、FSx for Lustre ファイルシステムは S3 オブジェクトをファイルとして透過的に表示します。これにより結果を S3 に書き込むことができます。今日まで、Amazon FSx は、新しい、または変更されたファイルを FSx から S3 にエクスポートするファイルシステムコマンドを提供してきました。しかし、これらのコマンドは、ファイルに対するアクセス権限をコピーせず、転送をモニタリングまたはキャンセルすることができませんでした。
本日、Amazon FSx for Lustre は、AWS アプリケーションプログラミングインターフェイス (API) の提供を開始しました。これにより、FSx から S3 に簡単にファイルをエクスポートできるようになります。この新しい API を使用すれば、新しい、または変更されたファイルの S3 への書き込みを簡単に開始し、モニタリングし、キャンセルすることができます。AWS ネイティブの API であることから、これを使うことにより、Lambda ベースのサーバーレスアプリケーションなど、クラウドネイティブのワークフローからのデータのエクスポートタスクを簡単に調整できます。ファイルデータとファイルに対するアクセス権限の転送に加えて、この API では、シンボリックリンク、ファイルの所有権のメタデータ、ファイルのタイムスタンプも S3 に転送できます。ファイルに対するアクセス権限やその他のファイルメタデータは、AWS DataSync および AWS Storage Gateway により使用されるのと同じ形式で S3 に保存されます。
さらに、FSx は、S3 からのファイルメタデータのインポート速度を 4 倍にしました。これにより、S3 バケット FSx ファイルシステムの起動速度を最大 4 倍にすることができます。
この新機能、API、およびパフォーマンスの向上は、FSx for Lustre が利用可能なすべてのリージョンのすべての新しいファイルシステムで利用できます。詳細については、Amazon FSx for Lustre の製品ページを参照してください。また、ここでブログの投稿をご覧いただけます。