为输入数据选择视频文件或视频帧 - Amazon SageMaker
Amazon Web Services 文档中描述的 Amazon Web Services 服务或功能可能因区域而异。要查看适用于中国区域的差异,请参阅中国的 Amazon Web Services 服务入门

本文属于机器翻译版本。若本译文内容与英语原文存在差异,则一律以英文原文为准。

为输入数据选择视频文件或视频帧

创建视频帧对象检测或对象跟踪标签作业时,您可以提供一系列视频帧(图像),也可以使用 Amazon SageMaker 控制台让 Ground Truth 自动从视频文件中提取视频帧。有关这些选项的更多信息,请参阅以下部分。

提供视频帧

视频帧是从视频文件中提取的图像序列。您可以创建 “Ground Truth” 标注作业,以使工作人员标注视频帧的多个序列。每个序列都由从单个视频中提取的图像组成。

要使用视频帧序列创建标注作业,必须使用唯一的键名称前缀在 Amazon S3 中。在 Amazon S3 控制台中,密钥名称前缀为文件夹。因此,在 Amazon S3 控制台中,每个视频帧序列必须位于 Amazon S3 中其自己的文件夹中。

例如,如果您有两个视频帧序列,则可以使用键名称前缀sequence1/sequence2/来识别您的序列。在此示例中,您的序列可能位于s3://DOC-EXAMPLE-BUCKET/video-frames/sequence1/s3://DOC-EXAMPLE-BUCKET/video-frames/sequence2/.

如果您使用 Ground Truth 控制台创建输入清单文件,则所有序列键名称前缀都应位于 Amazon S3 中的同一位置。例如,在 Amazon S3 控制台中,每个序列可以位于s3://DOC-EXAMPLE-BUCKET/video-frames/. 在此示例中,您的第一个视频帧序列(图像)可能位于s3://DOC-EXAMPLE-BUCKET/video-frames/sequence1/,你的第二个序列可能位于s3://DOC-EXAMPLE-BUCKET/video-frames/sequence2/.

重要

即使您只有一个需要工作人员标记的视频帧序列,该序列也必须在 Amazon S3 中具有键名称前缀。如果您使用的是 Amazon S3 控制台,则表示您的序列位于文件夹中。它不能位于 S3 存储桶的根目录中。

使用视频帧序列创建工作人员任务时,“Ground Truth” 对每个任务使用一个序列。在每个任务中,“Ground Truth” 使用-8二进制顺序。

例如,在 Amazon S3 中,视频帧可能按以下顺序排列:

[0001.jpg, 0002.jpg, 0003.jpg, ..., 0011.jpg]

它们在工作人员的任务中以相同的顺序排列:0001.jpg, 0002.jpg, 0003.jpg, ..., 0011.jpg.

也可以使用如下命名约定对框架进行排序:

[frame1.jpg, frame2.jpg, ..., frame11.jpg]

在这种情况下,frame10.jpgframe11.jpg来之前frame2.jpg在工作人员任务中。您的工作人员按以下顺序看到您的视频帧:frame1.jpg, frame10.jpg, frame11.jpg, frame2.jpg, ..., frame9.jpg.

提供视频文件

在控制台中创建新的标注作业时,可以使用 “Ground Truth” 帧分割功能,从视频文件(MP4 文件)中提取视频帧。从单个视频文件中提取的一系列视频帧称为视频帧序列.

您可以让 “Ground Truth 值” 自动从视频中提取所有帧(最多 2,000 个),也可以指定帧抽取频率。例如,您可以将 “Ground Truth” 提取每 10th帧从您的视频。

当您使用自动数据设置提取帧时,您最多可以提供 50 个视频,但在创建视频帧对象跟踪和视频帧对象检测标签作业时,输入清单文件不能引用 10 个以上的视频帧序列文件。如果使用自动数据设置控制台工具从 10 多个视频文件中提取视频帧,则需要修改该工具生成的清单文件,或创建一个新的清单文件以包含 10 个或更少的视频帧序列文件。要了解有关这些配额的更多信息,请参阅3D 点云和视频帧标记 Job 配额.

要使用视频帧提取工具,请参阅自动视频帧输入数据设置.

从视频中成功提取所有视频帧后,您将在 S3 输入数据集位置看到以下内容:

  • 每个视频命名的密钥名称前缀(Amazon S3 控制台中的文件夹)。这些前缀中的每一个都会导致:

    • 从视频中提取的视频帧序列,用于命名该前缀。

    • 一个序列文件,用于标识组成该序列的所有图像。

  • 扩展名为 .manifest 的输入清单文件。这将标识将用于创建标注作业的所有序列文件。

从单个视频文件中提取的所有帧都用于标注任务。如果从多个视频文件中提取视频帧,则会为标注作业创建多个任务,每个视频帧序列一个任务。

“Ground Truth” 将它提取的每个视频帧序列存储在您的 Amazon S3 位置,以供输入数据集使用唯一键名称前缀. 在 Amazon S3 控制台中,密钥名称前缀为文件夹。