发布于: Feb 6, 2019
Amazon FSx for Lustre 是一个用于机器学习、高性能计算、分析和其他数据处理工作负载的高性能文件系统,可以更轻松地处理驻留在 Amazon S3 中的数据,并提供将结果写回 S3 的新选项,并且最大数据传输速度是 FSx for Lustre 和 S3 之间速度的 2 倍。
数据处理工作负载通常需要通过快速且可扩展的 POSIX 文件系统界面呈现数据,并且通常具有存储在 Amazon S3 上的输入数据集。使用 FSx for Lustre,您可以快速轻松地开启链接到 Amazon S3 数据的高性能和可伸缩文件系统,透明地将 S3 对象作为文件访问,将结果写回 S3,然后关闭该文件系统。
以前,将结果从 FSx for Lustre 文件系统写回 S3 时,已更改的或新文件将作为新对象写入 S3 存储桶中的预定义位置。现在,您可以选择覆盖 Amazon S3 存储桶中的原始对象,或者,将新文件或已更改的文件写入您指定的前缀。这些选项允许将 FSx for Lustre 合并到您的数据处理工作流程,获得更多的灵活性。
此外,Amazon FSx for Lustre 现在提供的数据传输最大速度,是 Amazon S3 存储桶和 FSx for Lustre 文件系统之间速度的 2 倍,使您可以更快地完成工作负载处理。
这些增强功能已在推出 FSx for Lustre 的所有地区中的所有新文件系统中提供。了解关于将结果写入 S3 的新选项的更多信息,以及了解关于 FSx for Lustre 性能的更多信息。