为输入数据选择视频文件或视频帧 - Amazon SageMaker
AWS 文档中描述的 AWS 服务或功能可能因区域而异。要查看适用于中国区域的差异,请参阅中国的 AWS 服务入门

本文属于机器翻译版本。若本译文内容与英语原文存在差异,则一律以英文原文为准。

为输入数据选择视频文件或视频帧

在创建视频帧对象检测或对象跟踪标记作业时,您可以提供一系列视频帧(图像),也可以使用 Amazon SageMaker 控制台让 自动从视频文件中Ground Truth提取视频帧。可以使用以下部分了解有关这些选项的更多信息。

提供视频帧

视频帧是从视频文件中提取的图像序列。您可以创建Ground Truth标记作业,让工作人员标记多个视频帧序列。每个序列由从单个视频中提取的图像组成。

要使用视频帧序列创建标记作业,您必须在 中使用唯一的键名前缀存储每个序列Amazon S3。在 Amazon S3 控制台中,键名称前缀是文件夹。因此,在 Amazon S3 控制台中,视频帧的每个序列必须位于 中自己的文件夹中Amazon S3。

例如,如果您有两个视频帧序列,则可以使用键名前缀 sequence1/sequence2/ 来标识您的序列。在此示例中,您的序列可能位于 s3:///video-frames/sequence1/ 和 中s3:///video-frames/sequence2/

如果您使用 Ground Truth 控制台创建输入清单文件,则所有序列键名称前缀应位于 中的同一位置Amazon S3。例如,在 Amazon S3 控制台中,每个序列可能位于 中的文件夹中s3:///video-frames/。在此示例中,您的第一个视频帧序列(图像)可能位于 中s3:///video-frames/sequence1/,而您的第二个序列可能位于 中s3:///video-frames/sequence2/

重要

即使您只有单个序列的视频帧,您希望工作人员标记该序列,该序列在 中也必须具有键名前缀Amazon S3。如果您使用的是 Amazon S3 控制台,这意味着您的序列位于文件夹中。它不能位于 S3 存储桶的根目录中。

当使用视频帧序列创建工作人员任务时, 对每个任务Ground Truth使用一个序列。在每个任务中, 使用 Ground TruthUTF-8 二进制顺序对视频帧进行排序。

例如,视频帧在 中可能采用以下顺序Amazon S3:

[0001.jpg, 0002.jpg, 0003.jpg, ..., 0011.jpg]

它们在工作人员的任务中以相同的顺序排列:0001.jpg, 0002.jpg, 0003.jpg, ..., 0011.jpg

也可以使用与下类似的命名约定对帧进行排序:

[frame1.jpg, frame2.jpg, ..., frame11.jpg]

在这种情况下, frame10.jpgframe11.jpg 位于工作线程任务frame2.jpg中的 之前。您的工作人员按照以下顺序看到您的视频帧:frame1.jpg, frame10.jpg, frame11.jpg, frame2.jpg, ..., frame9.jpg

提供视频文件

在 控制台中创建新的标记作业时,您可以使用Ground Truth帧拆分功能从视频文件MP4 文件)中提取视频帧。从单个视频文件中提取的一系列视频帧称为视频帧序列。

您可以让 Ground Truth 自动从视频中提取所有帧(最多 2000 个),也可以指定帧提取频率。例如,您可以让 从视频Ground Truth中提取每第 10 帧。

在使用自动数据设置提取帧时,您可以提供最多 50 个视频,但是,当您创建视频帧对象跟踪和视频帧对象检测标记作业时,输入清单文件引用的视频帧序列文件不能超过 10 个。如果您使用自动数据设置控制台工具从 10 个以上的视频文件中提取视频帧,则需要修改该工具生成的清单文件或创建新的清单文件以包含 10 个或更少的视频帧序列文件。要了解有关这些配额的更多信息,请参阅3D 点云和视频帧标记作业配额

要使用视频帧提取工具,请参阅自动视频帧输入数据设置

当已成功从视频中提取所有视频帧时,您将在 S3 输入数据集位置中看到以下内容:

  • 以每个视频命名的键名前缀 (Amazon S3控制台中的文件夹)。这些前缀都会导致:

    • 从用于命名该前缀的视频中提取的视频帧序列。

    • 用于标识组成该序列的所有图像的序列文件。

  • 扩展名为 .manifest 的输入清单文件。这将标识将用于创建标记作业的所有序列文件。

从单个视频文件中提取的所有帧都用于标记任务。如果您从多个视频文件中提取视频帧,则会为标记作业创建多个任务,每个视频帧序列一个任务。

Ground Truth 会将它提取的每个视频帧序列存储在您的Amazon S3位置,以便使用唯一的键名前缀输入数据集。在 Amazon S3 控制台中,键名前缀是文件夹。