使用 Amazon DataSync迁移至 FSx for ONTAP - FSx for ONTAP
Amazon Web Services 文档中描述的 Amazon Web Services 服务或功能可能因区域而异。要查看适用于中国区域的差异,请参阅 中国的 Amazon Web Services 服务入门 (PDF)

本文属于机器翻译版本。若本译文内容与英语原文存在差异,则一律以英文原文为准。

使用 Amazon DataSync迁移至 FSx for ONTAP

我们建议使用 Amazon DataSync 在 ONTAP 文件系统的 FSX 和非 ONTap 文件系统之间传输数据,包括 Lustre 的 FSX、OpenZFS 的 fsX、Windows 文件服务器的 fsX、Amazon EFS、Amazon S3 和本地文件管理器。如果您要在适用于 ONTAP 的 FSx 和 ONTAP 之间传输文件,我们 NetApp 建议使用。NetApp SnapMirror Amazon DataSync 是一项数据传输服务,可简化、自动化和加速通过 Internet 或在自我管理的存储系统和 Amazon 存储服务之间移动和复制数据。 Amazon Direct Connect DataSync 可以传输您的文件系统数据和元数据,例如所有权、时间戳和访问权限。

您可以使用 DataSync 在两个 FSx for ONTAP 文件系统之间传输文件,也可以将数据移动到另一个 Amazon Web Services 区域 或帐户中的文件系统。 Amazon 您也可以将适用于 ONTAP 文件系统的 FSx 用于其他任务。 DataSync 例如,您可以执行一次性数据迁移、定期摄取分布式工作负载的数据以及按计划复制以实现数据保护与恢复。

在中 DataSync,位置是适用于 ONTAP 文件系统的 FSx 的终端节点。有关特定传输场景的信息,请参阅《Amazon DataSync 用户指南》中的使用位置

注意

如果您计划使用 All 分层策略将数据迁移至容量池层,请记住,文件元数据始终存储在 SSD 层上,且所有新用户数据都首先写入 SSD 层。当数据写入 SSD 层时,后台分层进程将开始将您的数据分层到容量池存储,但是分层进程非即时,并且会消耗网络资源。考虑到文件元数据(占用户数据大小的 3-7%),您需要调整 SSD 层的大小,作为用户数据的缓冲区,然后再将其分层到容量池存储。建议 SSD 利用率不要超过 80%。

迁移数据时,请务必使用CloudWatch 文件系统指标监控您的固态硬盘层,以确保其填充速度不会超过分层过程将数据移动到容量池存储所能达到的速度。您还可以将 DataSync 传输限制为低于分层速率的速率,以确保您的固态硬盘层使用率不超过 80%。例如,对于吞吐能力至少为 512 MBp 的文件系统,200 MBp 的限制通常会平衡数据传输和数据分层速率。

先决条件

要将数据迁移到 FSx for ONTAP 设置,您需要符合要求的服务器和网络。 DataSync 要了解更多信息,请参阅《Amazon DataSync 用户指南》 DataSync中的要求

使用迁移文件的基本步骤 DataSync

使用将文件从源传输到目标 DataSync 包括以下基本步骤:

  • 在您的环境中下载并部署代理并激活它(如果在两者之间传输,则不需要 Amazon Web Services)。

  • 创建源和目标位置。

  • 创建任务。

  • 运行任务,将文件从源传输到目标。

有关更多信息,请参阅《Amazon DataSync 用户指南》中的以下主题: