Amazon FSx for Lustre

共享存储快速而可扩展,能够支持您的计算工作负载

Amazon FSx for Luster 是一项完全托管的服务,可为计算工作负载提供经济高效的高性能存储。机器学习、高性能计算 (HPC)、视频渲染和财务模拟等许多工作负载都依赖于计算实例,它通过高性能共享存储访问同一组数据。

FSx for Lustre 是世界上最常用的高性能文件系统,由 Lustre 提供支持,可提供亚毫秒级延迟、最高每秒数百 GB 的吞吐量和百万级的 IOPS。它提供了多种部署选项和存储类型,可以根据您的工作负载需求优化成本和性能。

FSx for Luster 文件系统也可以链接到 Amazon S3 存储桶,使您可以同时从高性能文件系统和 S3 API 访问和处理数据。

概览:Amazon FSx for Lustre

优势

高性能和可扩展

Amazon FSx for Lustre 提供的性能可以满足各种高性能工作负载的要求。Lustre 文件系统针对数据处理进行了优化,提供亚毫秒级延迟,和可扩展至每秒数百 GB 的吞吐量。只需单击几下,即可从数以万计的计算实例中访问高性能共享存储。

易于处理 S3 数据

Amazon FSx for Luster 使您可以轻松地在 S3 中处理您的云数据集。当链接到 S3 存储桶时,FSx for Luster 以透明方式将对象显示为文件,从而使您可以运行工作负载,而无需管理来自 S3 的数据传输。随着 S3 存储桶中内容的变化,FSx for Luster 会自动更新文件系统,提供最新数据来运行工作负载。

经济高效

Amazon FSx for Luster 提供了多种存储选项,以优化价格和性能。固态硬盘 (SSD) 存储针对延迟敏感型工作负载进行了优化。硬盘 (HDD) 存储针对以吞吐量为中心的工作负载进行了优化。您还可以选择非复制性临时文件系统,以进一步降低短期处理数据的成本。 

针对任何 Linux 工作负载而设计

Amazon FSx for Lustre 与 POSIX 兼容,因此您可以使用当前基于 Linux 的应用程序,无需进行任何更改。FSx for Lustre 提供原生文件系统接口,可以像任何文件系统一样与 Linux 操作系统配合使用。它可以实现写后读一致性,并支持文件锁定。您可以从 Amazon EC2 实例、Amazon EKS 集群访问您的文件系统,也可使用 AWS Direct Connect 或 AWS VPN 从本地访问。

简单且完全托管

Amazon FSx for Lustre 让您可以轻松在云中启动和运行高性能的 Lustre 文件系统。您不需要再担心硬件预置和维护、软件配置、备份管理,以及复杂的文件系统性能优化问题。只需几分钟,您就可以使用 AWS 管理控制台、AWS CLI 或 AWS 开发工具包创建并启动 Amazon FSx for Lustre 文件系统。

安全且合规

Amazon FSx for Lustre 会自动执行数据静态加密和传输中加密。FSx for Lustre 符合 PCI-DSS、ISO 和 SOC 标准以及 HIPAA 的规定,适合具有监管合规要求的使用案例。您可以使用 POSIX 权限或 Amazon Virtual Private Cloud (VPC) 安全组规则来控制网络访问。

使用案例

机器学习

机器学习工作负载需要使用大量训练数据。这种工作负载通常使用共享文件存储,因为多个计算实例需要同时处理训练数据集。FSx for Lustre 提供处理机器学习数据集训练所需的共享文件存储,具有高吞吐量、高一致性和低延迟的特点,是机器学习工作负载的极佳选择。FSx for Lustre 还继承了 Amazon SageMaker,让您可以加速训练作业。

高性能计算

高性能计算 (HPC) 让科学家和工程师们能够解决复杂的计算密集型问题。与油气发现和基因组学分析工作负载一样,HPC 工作负载处理大量数据,而这些数据需要由具有高吞吐量的多个计算实例访问。FSx for Lustre 提供面向高性能工作负载的性能和成本要求进行优化的文件系统,支持数以千计的 EC2 实例访问,是 HPC 和科学计算工作负载的理想选择。FSx for Lustre 还集成了 AWS ParallelCluster 和 AWS Batch,让您可以轻松地处理 HPC 工作负载。

媒体处理和转码

视频渲染、视觉效果和媒体制作等媒体数据处理工作流程需要使用计算和存储资源来处理创建的大量数据。FSx for Lustre 可以实现处理、分发和分析数字媒体文件所需的高性能和低延迟。

自动驾驶汽车

开发自动驾驶汽车系统的客户一般通过对大量汽车传感器和摄像头数据进行仿真和训练来测试模型,以确保汽车安全。借助 FSx for Lustre,您可以从数以千计的高性能节点同时访问该数据,让您可以更轻松地大规模运行模拟并加速模型开发。

大数据和财务分析

包括 SAS Grid 工作负载和财务分析在内的大数据分析使用案例会产生大量数据,而这些数据需要高性能存储才能支持数据密集型应用程序。处理不断增长的大量数据可能成本极高、十分复杂。Amazon FSx for Lustre 可以大规模处理大量数据,它的性能和成本都经过优化,可以让您的组织更快地有所发现并实现价值。

电子设计自动化

电子设计自动化 (EDA) 是一种高性能应用程序,用于在硅芯片生产设计阶段模拟性能和故障。FSx for Lustre 提供的性能和灵活性使您能够更快地创新、设计和验证新产品,并根据需要进行扩展。

Product-Page_Standard-Icons_01_Product-Features_SqInk
查看 Amazon FSx for Lustre 的功能

了解 Amazon FSx for Lustre 的主要功能。

了解更多 
Product-Page_Standard-Icons_02_Sign-Up_SqInk
注册免费账户

立即享受 AWS 免费套餐。 

注册 
Product-Page_Standard-Icons_03_Start-Building_SqInk
开始在控制台中构建

开始在 AWS 控制台中使用 Amazon FSx for Lustre 构建。

登录