Amazon FSx for Lustre

Amazon FSx for Lustre 讓您以輕鬆、經濟實惠的方式,啟動和執行全世界最熱門的高效能檔案系統。適用於速度很重要的工作負載,如機器學習、高效能運算 (HPC)、影片處理和財務建模。

開放程式碼 Lustre 檔案系統針對需要快速儲存的應用程式所設計,讓您的儲存得以跟上運算速度。Lustre 是為了快速、經濟實惠地處理世界上發展快速的資料集所設計,且廣泛應用於世界前 500 快速電腦的檔案系統。它能提供低於一毫秒的延遲、每秒鐘數百 GB 處理量和數百萬 IOPS。

Amazon FSx 現為全受管服務,讓您能將 Lustre 檔案系統用於速度很重要的任何工作負載。它能解決設定和管理 Lustre 檔案系統的傳統複雜性,讓您能在數分鐘內啟動高效能檔案系統。還能提供數種部署選項以優化成本。

FSx for Lustre 與 Amazon S3 整合,能輕鬆用 Lustre 檔案系統處理資料集。連結至 S3 儲存貯體時,FSx for Lustre 檔案系統會以透明的方式以檔案呈現 S3 物件,讓您將變更的資料寫回 S3。

Amazon FSx for Lustre 概觀

優勢

高效能與可擴展性

Amazon FSx for Lustre 提供的效能可滿足各種高效能工作負載。Lustre 檔案系統可透過低於一毫秒的延遲時間和可擴展到每秒數百 GB 的輸送量來優化資料處理。

無縫存取 S3 資料

Amazon FSx for Lustre 能與 Amazon S3 自然搭配使用,可利用高效能 POSIX 界面輕鬆處理 S3 的雲端資料集。與 S3 儲存貯體連結時,FSx for Lustre 會以透明的方式以檔案呈現 S3 物件。FSx for Lustre 可追蹤變更,讓您隨時將檔案系統上已變更或新的資料寫回 S3 儲存貯體。

簡易性和完全管理

Amazon FSx for Lustre 可讓您輕鬆啟動和執行雲端的高效能 Lustre 檔案系統。您不再需要擔心檔案系統的硬體佈建和維護、軟體組態以及複雜的效能調整。您可以使用 AWS 管理主控台、AWS CLI 或 AWS 開發套件,在幾分鐘內建立和啟動 Amazon FSx for Lustre 檔案系統。

存取可在任何地方執行的 Linux 應用程式

Amazon FSx for Lustre 符合 POSIX 標準,因此無須進行任何變更即可使用目前以 Linux 為基礎的應用程式。FSx for Lustre 提供原生的檔案系統界面,其使用方式與其他採用 Linux 作業系統的任何檔案系統一樣。它還提供先寫後讀一致性,並支援檔案鎖定。您可以使用 POSIX 許可和 Amazon Virtual Private Cloud (VPC) 規則,控制對 FSx for Lustre 檔案系統的存取。您可以使用 AWS DIrect Connect 或 AWS VPN,從 Amazon EC2 執行個體或內部部署電腦存取檔案系統。

多種部署選項

Amazon FSx for Lustre 在暫存和持久性檔案系統之間,提供一個短期和長期的資料處理選項。暫存檔案系統適合用於暫時儲存和資料的短期處理。檔案伺服器失敗時,系統不會複寫或保留資料。持久性檔案系統適合用於長期儲存和工作負載。在持久性檔案系統中,如果檔案伺服器失敗,則系統會複寫資料並取代檔案伺服器。

安全及合規

Amazon FSx for Lustre 可自動加密您的靜態和傳輸中資料。如果您需要符合法規,FSx for Lustre 符合 PCI-DSS、ISO 和 SOC 規定和 HIPAA 資格。您也可以透過 Amazon Virtual Private Cloud (VPC) 安全群組規則來控制網路存取。

使用案例

機器學習

機器學習工作負載使用大量的訓練資料。這些工作負載通常使用共用檔案儲存,因為多個運算執行個體需要同時處理訓練資料集。FSx for Lustre 已針對機器學習工作負載進行優化,因為它為處理 ML 訓練資料集提供高輸送量和一致性,以及低延遲的共用檔案儲存。FSx for Lustre 也已和 Amazon SageMaker 整合,讓您可以加速訓練任務。

高效能運算

高效能運算 (HPC) 可讓科學家和工程師解決複雜的運算密集型問題。石油和天然氣發現,以及基因體分析等 HPC 工作負載要處理大量的資料,而這些資料需要由多個運算執行個體以高輸送量存取。FSx for Lustre 是 HPC 和科學運算工作負載的理想選擇,因為它提供的檔案系統可針對高效能工作負載提供優化的效能和成本,而且擁有數千個 EC2 執行個體的檔案系統存取權。FSx for Lustre 也已和 AWS ParallelCluster 與 AWS Batch 整合,讓您可以輕鬆透過 HPC 工作負載使用。

媒體處理和轉碼

媒體資料處理工作流程 (如影片轉譯、視覺效果和媒體製作) 需要運算和儲存資源來處理所建立的大量資料。FSx for Lustre 提供處理、分發和分析數位媒體檔案所需的高效能和低延遲。

自動駕駛汽車

開發自動駕駛汽車系統的客戶通常會對大量的車輛感應器和攝影機資料進行模擬和訓練以測試模型,進而確保車輛的安全。FSx for Lustre 讓您能以高效能,同時從數千個節點存取資料,更加輕鬆地執行大規模模擬,並加速模型開發。

大數據和財務分析

大數據分析使用案例,包括詐欺偵測和財務分析,會產生大量需要高效能儲存的資料,以支援資料密集型應用程式。處理不斷增加的資料量既昂貴又複雜。Amazon FSx for Lustre 可大規模處理大量資料、優化效能和成本,更快地發現並為您的組織提供價值。

電子設計自動化 (EDA)

EDA 是一種高效能應用程式,用於在矽晶片生產的設計階段模擬效能和故障。FSx for Lustre 提供的效能和靈活性可讓您更快地進行創新、設計和驗證新產品,並進行擴展以滿足需求。

Product-Page_Standard-Icons_01_Product-Features_SqInk
查看 Amazon FSx for Lustre 功能

了解 Amazon FSx for Lustre 的主要功能。

進一步了解 
Product-Page_Standard-Icons_02_Sign-Up_SqInk
註冊免費帳戶

立即存取 AWS 免費方案 

註冊 
Product-Page_Standard-Icons_03_Start-Building_SqInk
開始在主控台進行建置

開始在 AWS 主控台使用 Amazon FSx for Lustre 進行建置。

登入