使用 Amazon FSx 适用于 Lustre 文件系统的可用部署选项 - Amazon FSx for Lustre
AWS 文档中描述的 AWS 服务或功能可能因区域而异。要查看适用于中国区域的差异,请参阅中国的 AWS 服务入门

本文属于机器翻译版本。若本译文内容与英语原文存在差异,则一律以英文原文为准。

使用 Amazon FSx 适用于 Lustre 文件系统的可用部署选项

Amazon FSx for Lustre 提供了一个高性能的并行文件系统,该系统可跨多个网络文件服务器存储数据,从而最大限度地提高性能并减少瓶颈。这些服务器有多个磁盘。为了分散负载,Amazon FSX 会将文件系统数据分片为较小的块,并使用称为条带化的过程在磁盘和服务器之间分布这些数据。有关 Amazon FSx for Lustre 数据条带化的更多信息,请参阅文件系统中的数据条带化

最佳做法是将驻留在 Amazon S3 上的高持久性长期数据存储库与 Amazon FSX 适用于 Lustre 高性能文件系统链接起来。

在这种情况下,您将数据集存储在 S3 数据存储库上。当您创建 Amazon FSx for Lustre 文件系统时,您可以将其链接到 S3 数据存储库。此时,S3 存储桶中的对象将作为 FSX 文件系统上的文件和目录列出。然后,当第一次在 Amazon FSX 文件系统上访问文件时,Amazon FSX 会自动将文件内容从 S3 复制到您的 Lustre 文件系统。运行计算工作负载后,或者随时可以使用数据存储库任务将更改导出回 S3。有关更多信息,请参阅 将数据存储库与 Amazon FSx for Lustre使用数据存储库任务导出数据和元数据更改

Amazon FSx 适用于 Lustre 的文件系统部署选项

Amazon FSx for Lustre 文件系统使用持续的部署类型。

持续文件系统

持续文件系统专为长期存储和工作负载而设计。文件服务器具有高可用性,数据将在与文件系统关联的同一可用区 (AZ) 内自动复制。连接到文件服务器的数据卷独立于它们所连接的文件服务器进行复制。

将持久文件系统用于长时间或无限期运行且可能对可用性中断敏感的工作负载。

下图显示了 Amazon FSX 适用于 Lustre 永久性文件系统的体系结构,该系统在单个可用区内具有复制的高可用性文件服务器和数据卷。


     Amazon FSx for Lustre 持续文件系统架构。

Amazon FSX 会持续监控永久性文件系统的硬件故障,并在发生故障时自动更换基础设施组件。在持久文件系统上,如果文件服务器变得不可用,则会在发生故障的几分钟内自动替换该文件。在此期间,客户端请求该服务器上的数据透明地重试,并在替换文件服务器后最终成功。永久性文件系统上的数据被复制到磁盘上,任何故障磁盘都会自动更换,透明。