共享存储空间 - Amazon ParallelCluster
Amazon Web Services 文档中描述的 Amazon Web Services 服务或功能可能因区域而异。要查看适用于中国区域的差异,请参阅 中国的 Amazon Web Services 服务入门 (PDF)

本文属于机器翻译版本。若本译文内容与英语原文存在差异,则一律以英文原文为准。

共享存储空间

Amazon ParallelCluster支持使用 Amazon EBS、用于 ONTAP 的 FSx、用于 OpenZFS 共享存储卷的 FS x 或用于 Lustre 共享存储文件系统的 Amazon EFS 和 FSx。我们建议您遵循Amazon架构完善的框架可靠性支柱指南,备份您的卷和文件系统。

选择满足您的 HPC 应用程序 I/O 要求的存储系统。您可以根据特定的使用案例优化每个文件系统。有关更多信息,请参阅存储选项概述

Amazon EBS 卷连接到头节点并通过 NFS 与计算节点共享。此选项可能具有成本效益,但是随着存储需求的扩展,性能取决于头节点资源。随着更多的计算节点添加到集群以及吞吐量需求的增加,这可能会成为瓶颈。

Amazon EFS 文件系统会随着存储需求的变化而扩展。您可以为各种用例配置这些文件系统。使用 Amazon EFS 文件系统在集群上运行并行和延迟敏感型应用程序。

FSx for Lustre 文件系统可以以高达每秒数百 GB 的吞吐量、数百万的 IOPS 和亚毫秒的延迟处理海量数据集。将 FSx for Lustre 文件系统用于要求苛刻的高性能计算环境。

在中SharedStorage 部分,您可以定义外部存储或Amazon ParallelCluster托管存储:

  • 外部存储是指您管理的现有卷或文件系统。 Amazon ParallelCluster不创建或删除此存储。

  • 托管存储是指Amazon ParallelCluster已创建并可以删除的卷或文件系统。

外部存储

您可以配置Amazon ParallelCluster为在创建或更新集群时将外部存储连接到群集。同样,您可以将其配置为在群集被删除或更新时将外部存储与集群分离。您的数据会被保留,您可以在集群生命周期之外将其用于长期永久共享存储。

Amazon ParallelCluster托管存储

Amazon ParallelCluster默认情况下,在配置中,托管存储取决于群集的生命周期。默认情况下,SharedStorageDeletionPolicy配置参数设置Delete为。

默认情况下,如果满足以下条件之一,则会删除Amazon ParallelCluster托管文件系统或卷及其数据。

  • 您删除集群。

  • 您可以更改托管共享存储配置Name

  • 您从配置中移除托管共享存储。

设置DeletionPolicyRetain为可保留您托管的共享文件系统或卷和数据。我们建议您定期备份数据,以免丢失数据。您可以使用Amazon Backup来集中管理所有存储选项的备份。

您可以使用配置设置删除生命周期依赖关系。有关更多信息,请参阅将Amazon ParallelCluster托管存储转换为外部存储

有关共享存储配额的信息,请参阅共享存储配额

有关共享存储和切换到新Amazon ParallelCluster版本的更多信息,请参阅最佳实践:将集群移至新的Amazon ParallelCluster次要版本或补丁版本

您可以配置Amazon ParallelCluster为在创建或更新集群时将外部存储连接到群集。同样,您可以将其配置为在群集被删除或更新时将外部存储与集群分离。您的数据会被保留,您可以将其用于独立于集群生命周期的长期永久共享存储解决方案。

默认情况下,托管存储取决于群集的生命周期。您可以使用中描述的配置设置删除依赖关系将Amazon ParallelCluster托管存储转换为外部存储

通过特定的设置,您可以针对您的用例优化每种支持的存储解决方案。

有关共享存储配额的信息,请参阅共享存储配额

有关共享存储和切换到新Amazon ParallelCluster版本的更多信息,请参阅最佳实践:将集群移至新的Amazon ParallelCluster次要版本或补丁版本