CreateRecipeJob - Amazon Glue DataBrew
Amazon Web Services 文档中描述的 Amazon Web Services 服务或功能可能因区域而异。要查看适用于中国区域的差异,请参阅 中国的 Amazon Web Services 服务入门 (PDF)

本文属于机器翻译版本。若本译文内容与英语原文存在差异,则一律以英文原文为准。

CreateRecipeJob

使用现有Amazon Glue DataBrew配方中定义的步骤创建新任务来转换输入数据

请求语法

POST /recipeJobs HTTP/1.1 Content-type: application/json { "DatabaseOutputs": [ { "DatabaseOptions": { "TableName": "string", "TempDirectory": { "Bucket": "string", "BucketOwner": "string", "Key": "string" } }, "DatabaseOutputMode": "string", "GlueConnectionName": "string" } ], "DataCatalogOutputs": [ { "CatalogId": "string", "DatabaseName": "string", "DatabaseOptions": { "TableName": "string", "TempDirectory": { "Bucket": "string", "BucketOwner": "string", "Key": "string" } }, "Overwrite": boolean, "S3Options": { "Location": { "Bucket": "string", "BucketOwner": "string", "Key": "string" } }, "TableName": "string" } ], "DatasetName": "string", "EncryptionKeyArn": "string", "EncryptionMode": "string", "LogSubscription": "string", "MaxCapacity": number, "MaxRetries": number, "Name": "string", "Outputs": [ { "CompressionFormat": "string", "Format": "string", "FormatOptions": { "Csv": { "Delimiter": "string" } }, "Location": { "Bucket": "string", "BucketOwner": "string", "Key": "string" }, "MaxOutputFiles": number, "Overwrite": boolean, "PartitionColumns": [ "string" ] } ], "ProjectName": "string", "RecipeReference": { "Name": "string", "RecipeVersion": "string" }, "RoleArn": "string", "Tags": { "string" : "string" }, "Timeout": number }

URI 请求参数

该请求不使用任何 URI 参数。

请求正文

请求接受采用 JSON 格式的以下数据。

Name

作业的唯一名称。有效字符包括字母数字(A-Z、a-z、0-9)、连字符 (-)。

类型:字符串

长度限制:最小长度为 1。长度为 240。

必需:是

RoleArn

在DataBrew运行作业时担任的Amazon Identity and Access Management(IAAmon)。

类型:字符串

长度限制:最小长度为 20。最大长度为 2048。

必需:是

DatabaseOutputs

表示一个 JDBC 数据库输出对象列表,它定义了要写入DataBrew食谱作业的输出目标。

类型:DatabaseOutput 对象数组

数组成员:最少 1 项。

必需:否

DataCatalogOutputs

代表作业运行时 Amazon Glue Data Catalog 输出的一个或多个构件。

类型:DataCatalogOutput 对象数组

数组成员:最少 1 项。

必需:否

DatasetName

此作业处理的数据集的名称。

类型:字符串

长度限制:最小长度为 1。最大长度为 255。

必需:否

EncryptionKeyArn

用于保护作业的加密密钥的 Amon(ARN)。

类型:字符串

长度限制:最小长度为 20。最大长度为 2048。

必需:否

EncryptionMode

作业的加密模式包括以下几种:

  • SSE-KMS - 具有由 Amazon KMS 管理的密钥的服务器端加密。

  • SSE-S3 - 使用 Amazon S3 托管密钥进行服务器端加密。

类型:字符串

有效值:SSE-KMS | SSE-S3

必需:否

LogSubscription

启用或禁用任务的 Amazon CloudWatch 日志记录。如果启用了日志记录,则为每次作业运行CloudWatch写入一个日志流。

类型:字符串

有效值:ENABLE | DISABLE

必需:否

MaxCapacity

作业处理数据时DataBrew可以使用的最大节点数。

类型:整数

必需:否

MaxRetries

作业运行失败后重试此作业的最大次数。

类型:整数

有效范围:最小值为 0。

必需:否

Outputs

代表作业运行时 输出的一个或多个构件。

类型:Output 对象数组

数组成员:最少 1 项。

必需:否

ProjectName

要么是现有项目的名称,要么是配方和要与配方关联的数据集的组合。

类型:字符串

长度限制:最小长度为 1。最大长度为 255。

必需:否

RecipeReference

代表DataBrew配方的名称和版本。

类型:RecipeReference 对象

必需:否

Tags

要应用于该作业的元数据标签。

类型:字符串到字符串映射

映射条目:最多 200。

密钥长度限制:最小长度为 1。最大长度为 128。

长度长度约束:最大长度为 256。

必需:否

Timeout

作业的超时(以分钟为单位)。如果作业的运行时间超出此超时时间,作业将以 TIMEOUT 状态结束。

类型:整数

有效范围:最小值为 0。

必需:否

响应语法

HTTP/1.1 200 Content-type: application/json { "Name": "string" }

响应元素

如果此操作成功,则该服务将会发送回 HTTP 200 响应。

服务以 JSON 格式返回的以下数据。

Name

您创建的作业的名称。

类型:字符串

长度限制:最小长度为 1。长度为 240。

错误

有关所有操作常见错误的信息,请参阅常见错误

AccessDeniedException

对指定资源的访问被拒绝。

HTTP 状态代码:403

ConflictException

更新或删除资源可能会导致状态不一致。

HTTP 状态代码:409

ResourceNotFoundException

找不到一个或多个资源。

HTTP 状态代码:404

ServiceQuotaExceededException

已超过服务配额。

HTTP 状态代码:402

ValidationException

此请求的输入参数未通过验证。

HTTP 状态代码:400

另请参阅

有关在特定语言的 Amazon 软件开发工具包中使用此 API 的更多信息,请参阅以下内容: