使用数据存储库任务导出数据和元数据更改 - Amazon FSx for Lustre
Amazon Web Services 文档中描述的 Amazon Web Services 服务或功能可能因区域而异。要查看适用于中国区域的差异,请参阅中国的 Amazon Web Services 服务入门

本文属于机器翻译版本。若本译文内容与英语原文存在差异,则一律以英文原文为准。

使用数据存储库任务导出数据和元数据更改

使用以下过程可以使用 Amazon FSX 控制台和 CLI 导出数据和元数据更改。

  1. 从打开 Amazon FSx 控制台https://console.aws.amazon.com/fsx/.

  2. 在导航窗格中,选择文件系统,然后选择要为其创建任务的 Lustre 文件系统。

  3. 适用于操作中,选择导出到数据存储库. 如果文件系统未链接到 S3 上的数据存储库,则此选项不可用。这些区域有:创建数据存储库任务页随即出现。

    
                  “创建数据存储库” 任务页

    数据存储库任务类型设置为将导出到存储库,这是当前唯一支持的任务类型。这些区域有:导出目标值是您在创建文件系统时定义的导出前缀。

  4. (可选)指定最多 32 个要从 Amazon FSX 文件系统导出的目录或文件,方法是提供文件系统导出路径. 您提供的路径需要相对于文件系统的挂载点。如果装载点为/mnt/fsx/mnt/fsx/path1是要导出的文件系统上的目录或文件,则要提供的路径为path1.

    注意

    如果您提供的路径无效,则任务将失败。

  5. (可选)选择启用完成报告以在任务完成后生成任务完成报告。A任务完成报告提供了有关任务处理的文件的详细信息,这些文件符合报告范围. 要指定 Amazon FSX 传递报告的位置,请在文件系统的链接 S3 存储桶上输入相对路径报告路径.

  6. 选择创建数据存储库任务.

    顶部的通知文件系统页面显示您刚刚创建的任务。

要查看任务状态和详细信息,请选择数据存储库任务(Lustre)导航窗格中。默认排序顺序显示列表顶部的最新任务。

要从此页面查看任务摘要,请选择任务编号为您刚刚创建的任务。这些区域有:摘要页面。

  • 使用create-data-repository-taskCLI 命令可以导出 Amazon FSx of Lustre 文件系统上的数据和元数据更改。相应的 API 操作是 CreateDataRepositoryTask.

    $ aws fsx create-data-repository-task \ --file-system-id fs-0123456789abcdef0 \ --type EXPORT_TO_REPOSITORY \ --paths path1,path2/file1 \ --report Enabled=true,Scope=FAILED_FILES_ONLY,Format=REPORT_CSV_20191124,Path=s3://dataset-01/reports

    在成功创建数据存储库任务后,Amazon FSx 以 JSON 形式返回任务描述,如以下示例所示。

    { "Task": { "TaskId": "task-123f8cd8e330c1321", "Type": "EXPORT_TO_REPOSITORY", "Lifecycle": "PENDING", "FileSystemId": "fs-0123456789abcdef0", "Paths": ["path1", "path2/file1"], "Report": { "Path":"s3://dataset-01/reports", "Format":"REPORT_CSV_20191124", "Enabled":true, "Scope":"FAILED_FILES_ONLY" }, "CreationTime": "1545070680.120", "ClientRequestToken": "10192019-drt-12", "ResourceARN": "arn:aws:fsx:us-east-1:123456789012:task:task-123f8cd8e330c1321" } }

在创建将数据导出到 S3 上的链接数据存储库的任务后,您可以检查导出的状态。有关查看数据存储库任务的详细信息,请参阅访问数据存储库任务.