Lustre 文件系统的 FSx 部署选项 - FSx for Lustre
Amazon Web Services 文档中描述的 Amazon Web Services 服务或功能可能因区域而异。要查看适用于中国区域的差异,请参阅中国的 Amazon Web Services 服务入门

本文属于机器翻译版本。若本译文内容与英语原文存在差异,则一律以英文原文为准。

Lustre 文件系统的 FSx 部署选项

FSx for Lustre 提供了一种高性能的并行文件系统,可跨多个网络文件服务器存储数据,以最大限度地提高性能并减少瓶颈。这些服务器有多个磁盘。为了分散负载,Amazon FSx 将文件系统数据分片为较小的块,然后使用称为条带化的过程将它们分散到磁盘和服务器之间。有关用于 Lustre 数据条带化的 FSx 的更多信息,请参阅在文件系统中对数据进行条带化.

最佳做法是将驻留在 Amazon S3 上的高持久性长期数据存储库与 FSx 关联起来,用于 Lustre 高性能文件系统。

在这种情况下,您将数据集存储在链接的 Amazon S3 数据存储库中。当您为 Lustre 文件系统创建 FSx 时,您可以将其链接到 S3 数据存储库。此时,S3 存储桶中的对象将作为 FSx 文件系统上的文件和目录列出。然后,当首次在 Amazon FSx 文件系统上访问文件时,Amazon FSx 会自动将文件内容从 S3 复制到 Lustre 文件系统。计算工作负载运行后,或者随时可以使用数据存储库任务将更改导回 S3。有关更多信息,请参阅 将数据存储库与 Amazon FSx for Lustre使用数据存储库任务导出数据和元数据更改

适用于 Lustre 的 FSx 的文件系统部署选项

用于 Lustre 文件系统的 FSx 使用持久部署类型。

无论您使用何种部署类型,当您为 Lustre 文件系统创建 Amazon FSx 时,静态数据加密都会自动启用。从支持传输中加密的 Amazon EC2 实例访问传输中的数据时,暂存 2 和持久性文件系统会自动加密这些数据。有关加密的更多信息,请参阅Amazon FSx for Lustre.

永久性文件系统

永久性文件系统专为长期存储和工作负载而设计。文件服务器具有高可用性,并且数据会在文件系统所在的同一可用区内自动复制。连接到文件服务器的数据卷将独立于它们所连接的文件服务器进行复制。

Amazon FSx 会持续监控持久性文件系统的硬件故障,并在发生故障时自动替换基础设施组件。在持久性文件系统上,如果文件服务器不可用,则会在出现故障的几分钟内自动替换它。在此期间,客户端对该服务器上的数据请求会透明地重试,并在更换文件服务器后最终成功。永久性文件系统上的数据将复制到磁盘上,任何故障磁盘都会自动透明地替换。

将持久性文件系统用于长期存储,以及长期运行或无限期运行且可能对可用性中断敏感的以吞吐量为重点的工作负载。

下图显示了 Amazon FSx for Lustre 持久性文件系统的架构,该体系结构在单个可用区内具有复制的高可用性文件服务器和数据卷。

当从支持传输中加密的 Amazon EC2 实例访问传输中的数据时,持久性部署类型会自动加密这些数据。

持久性部署类型可以在 Lustre v2.10 或 v2.12 上构建,并支持 SSD(固态硬盘)和 HDD(硬盘驱动器)存储类型。对于 SSD 存储,每个存储单位的吞吐量为每 TB (TiB) 50、100 或 200 MB/s。对于 HDD,每个存储单位的吞吐量为每 TB 12 或 40 MB/s。

Reistent_1 部署类型在所有部署类型中都可用Amazon Web Services 区域.


     用于 Lustre 持久性文件系统体系结构的 FSx。