Amazon FSx for Lustre

快速可擴充的共用儲存裝置,能提升運算工作負載的效能

Amazon FSx Lustre 為全受管服務,可針對運算工作負載,提供具成本效益的高效能儲存裝置。機器學習、高效能運算 (HPC)、影片轉譯及財務模擬等許多工作負載均仰賴運算執行個體,透過高效能共用儲存裝置存取相同的資料集。

透過 Lustre 的技術支援,全球最受歡迎的高效能檔案系統 FSx for Lustre 能提供低於一毫秒的延遲時間、每秒最高數百 GB 的輸送量,以及數百萬的 IOPS。此系統能提供多種部署選項和儲存裝置類型,可針對您的工作負載要求提供理想成本並優化效能。

FSx for Lustre 檔案系統亦可連結至 Amazon S3 儲存貯體,讓您能夠從高效能檔案系統和 S3 API 同時存取和處理資料。

概觀:Amazon FSx for Lustre

優點

高效能和擴充能力

Amazon FSx for Lustre 提供的效能可滿足各種高效能工作負載。Lustre 檔案系統可藉由低於一毫秒的延遲時間和可擴大到每秒數百 GB 的輸送量來優化資料處理能力。只要按幾下滑鼠,即可透過數以萬計的運算執行個體存取高效能共用儲存裝置。

輕鬆使用 S3 資料

Amazon FSx for Lustre 可讓您輕鬆處理 S3 的雲端資料集。連結至 S3 儲存貯體後,FSx for Lustre 即可清楚將物件以檔案形式呈現,讓您執行工作負載,而無須管理 S3 的資料傳輸。當您的 S3 儲存貯體內容變更後,FSx for Lustre 會以最新可用的資料自動更新檔案系統,以執行工作負載。

具成本效益

Amazon FSx for Lustre 提供各種儲存選項,可提供理想價格並優化效能。固態硬碟 (SSD) 儲存裝置已針對延遲敏感的工作負載優化。傳統硬碟 (HDD) 儲存裝置已針對以輸送量為主的工作負載優化。您亦可選擇未複寫的暫存檔案系統,進一步降低短期資料處理的成本。 

專為所有 Linux 工作負載所設計

Amazon FSx for Lustre 符合 POSIX 規範,因此無須進行任何變更即可使用目前以 Linux 為基礎的應用程式。FSx for Lustre 提供原生的檔案系統界面,其使用方式與其他採用 Linux 作業系統的任何檔案系統一樣。此檔案系統亦提供先寫後讀一致性,並支援檔案鎖定。您可以使用 AWS Direct Connect 或 AWS VPN,從 Amazon EC2 執行個體、Amazon EKS 叢集及內部部署存取檔案系統。

簡單且全受管

Amazon FSx for Lustre 可讓您在雲端中輕鬆啟動和執行高效能 Lustre 檔案系統。您不必再擔心檔案系統的硬體佈建和維護、軟體組態、備份管理以及複雜的效能調整。您可以使用 AWS 管理主控台、AWS CLI 或 AWS 開發套件,在數分鐘內建立並啟動 Amazon FSx for Lustre 檔案系統。

安全且合規

Amazon FSx for Lustre 可自動加密您的靜態和傳輸中資料。如果您需要符合法規,FSx for Lustre 符合 PCI-DSS、ISO 和 SOC 規範和 HIPAA 資格。您可透過 POSIX 權限或 Amazon Virtual Private Cloud (VPC) 安全群組規則來控制網路存取。

使用案例

機器學習

機器學習工作負載使用大量的訓練資料。這些工作負載通常使用共用檔案儲存,因為多個運算執行個體需要同時處理訓練資料集。FSx for Lustre 已針對機器學習工作負載進行優化,因為它為處理 ML 訓練資料集提供高輸送量和一致性,以及低延遲的共用檔案儲存。FSx for Lustre 也已和 Amazon SageMaker 整合,讓您可以加速訓練任務。

高效能運算

高效能運算 (HPC) 可讓科學家和工程師解決複雜的運算密集型問題。石油和天然氣發現,以及基因體分析等 HPC 工作負載要處理大量的資料,而這些資料需要由多個運算執行個體以高輸送量存取。FSx for Lustre 是 HPC 和科學運算工作負載的理想選擇,因為它提供的檔案系統可針對高效能工作負載提供優化的效能和成本,而且擁有數千個 EC2 執行個體的檔案系統存取權。FSx for Lustre 也已和 AWS ParallelCluster 與 AWS Batch 整合,讓您可以輕鬆透過 HPC 工作負載使用。

媒體處理和轉碼

媒體資料處理工作流程 (如影片轉譯、視覺效果和媒體製作) 需要運算和儲存資源來處理所建立的大量資料。FSx for Lustre 可提供處理、分發和分析數位媒體檔案所需的高效能和低延遲。

自動駕駛汽車

開發自動駕駛汽車系統的客戶通常會對大量的車輛感應器和攝影機資料進行模擬和訓練以測試模型,進而確保車輛的安全。FSx for Lustre 讓您能以高效能,同時從數千個節點存取資料,更加輕鬆地執行大規模模擬,並加速模型開發。

大數據和財務分析

大數據分析使用案例,包括 SAS Grid 工作負載和財務分析,會產生大量需要高效能儲存的資料,以支援資料密集型應用程式。處理不斷增加的資料量既昂貴又複雜。Amazon FSx for Lustre 可大規模處理大量資料、優化效能並提供理想成本,更快發現並為您的組織提升價值。

電子設計自動化

電子設計自動化 (EDA) 是一種高效能應用,用於在矽晶片生產的設計階段模擬效能和故障情形。FSx for Lustre 提供的效能和靈活性可讓您以更快速度創新、設計和驗證新產品,並調整規模以滿足需求。

Product-Page_Standard-Icons_01_Product-Features_SqInk
查看 Amazon FSx for Lustre 功能

了解 Amazon FSx for Lustre 的主要功能。

進一步了解 
Product-Page_Standard-Icons_02_Sign-Up_SqInk
註冊免費帳戶

立即存取 AWS 免費方案 

註冊 
Product-Page_Standard-Icons_03_Start-Building_SqInk
開始在主控台進行建置

開始在 AWS 主控台使用 Amazon FSx for Lustre 進行建置。

登入