本文属于机器翻译版本。若本译文内容与英语原文存在差异,则一律以英文原文为准。
CreateRecipeJob
使用现有 Amazon Glue DataBrew 配方中定义的步骤创建用于转换输入数据的新作业
请求语法
POST /recipeJobs HTTP/1.1
Content-type: application/json
{
"DatabaseOutputs": [
{
"DatabaseOptions": {
"TableName": "string
",
"TempDirectory": {
"Bucket": "string
",
"BucketOwner": "string
",
"Key": "string
"
}
},
"DatabaseOutputMode": "string
",
"GlueConnectionName": "string
"
}
],
"DataCatalogOutputs": [
{
"CatalogId": "string
",
"DatabaseName": "string
",
"DatabaseOptions": {
"TableName": "string
",
"TempDirectory": {
"Bucket": "string
",
"BucketOwner": "string
",
"Key": "string
"
}
},
"Overwrite": boolean
,
"S3Options": {
"Location": {
"Bucket": "string
",
"BucketOwner": "string
",
"Key": "string
"
}
},
"TableName": "string
"
}
],
"DatasetName": "string
",
"EncryptionKeyArn": "string
",
"EncryptionMode": "string
",
"LogSubscription": "string
",
"MaxCapacity": number
,
"MaxRetries": number
,
"Name": "string
",
"Outputs": [
{
"CompressionFormat": "string
",
"Format": "string
",
"FormatOptions": {
"Csv": {
"Delimiter": "string
"
}
},
"Location": {
"Bucket": "string
",
"BucketOwner": "string
",
"Key": "string
"
},
"MaxOutputFiles": number
,
"Overwrite": boolean
,
"PartitionColumns": [ "string
" ]
}
],
"ProjectName": "string
",
"RecipeReference": {
"Name": "string
",
"RecipeVersion": "string
"
},
"RoleArn": "string
",
"Tags": {
"string
" : "string
"
},
"Timeout": number
}
URI 请求参数
该请求不使用任何 URI 参数。
请求体
请求接受采用 JSON 格式的以下数据。
- Name
-
作业的唯一名称。有效字符包括字母数字(A-Z、a-z、0-9)、连字符 (-)、句点 (.) 和空格。
类型:字符串
长度限制:长度下限为 1。最大长度为 240。
必需:是
- RoleArn
-
DataBrew 运行任务时要假设的 Amazon Identity and Access Management (IAM) 角色的亚马逊资源名称 (ARN)。
类型:字符串
长度约束:最小长度为 20。最大长度为 2048。
必需:是
- DatabaseOutputs
-
表示 JDBC 数据库输出对象的列表,该对象定义了要写入的 DataBrew 配方作业的输出目标。
类型:DatabaseOutput 对象数组
数组成员:最少 1 个物品。
必需:否
- DataCatalogOutputs
-
一个或多个工件,表示运行作业的 Amazon Glue Data Catalog 输出。
类型:DataCatalogOutput 对象数组
数组成员:最少 1 个物品。
必需:否
- DatasetName
-
此作业处理的数据集的名称。
类型:字符串
长度限制:长度下限为 1。最大长度为 255。
必需:否
- EncryptionKeyArn
-
用于保护任务的加密密钥的 Amazon 资源名称 (ARN)。
类型:字符串
长度约束:最小长度为 20。最大长度为 2048。
必需:否
- EncryptionMode
-
作业的加密模式包括以下几种:
-
SSE-KMS
-使用由 Amazon KMS管理的密钥进行服务器端加密。 -
SSE-S3
- 使用 Amazon S3 托管密钥进行服务器端加密。
类型:字符串
有效值:
SSE-KMS | SSE-S3
必需:否
-
- LogSubscription
-
为任务启用或禁用 Amazon CloudWatch 日志记录。如果启用了日志记录,则为每个作业运行 CloudWatch 写入一个日志流。
类型:字符串
有效值:
ENABLE | DISABLE
必需:否
- MaxCapacity
-
任务处理数据时 DataBrew 可以消耗的最大节点数。
类型:整数
必需:否
- MaxRetries
-
作业运行失败后重试此作业的最大次数。
类型:整数
有效范围:最小值为 0。
必需:否
- Outputs
-
代表作业运行时 输出的一个或多个构件。
类型:Output 对象数组
数组成员:最少 1 个物品。
必需:否
- ProjectName
-
要么是现有项目的名称,要么是要与配方关联的配方和数据集的组合。
类型:字符串
长度限制:长度下限为 1。最大长度为 255。
必需:否
- RecipeReference
-
表示 DataBrew 配方的名称和版本。
类型:RecipeReference 对象
必需:否
- Tags
-
适用于此任务的元数据标签。
类型:字符串到字符串映射
地图条目:最大数量为 200 个项目。
密钥长度限制:最小长度为 1。长度上限为 128。
值长度限制:最大长度为 256。
必需:否
- Timeout
-
作业的超时(以分钟为单位)。如果作业的运行时间超出此超时时间,作业将以
TIMEOUT
状态结束。类型:整数
有效范围:最小值为 0。
必需:否
响应语法
HTTP/1.1 200
Content-type: application/json
{
"Name": "string"
}
响应元素
如果此操作成功,则该服务将会发送回 HTTP 200 响应。
服务以 JSON 格式返回以下数据。
- Name
-
您创建的任务的名称。
类型:字符串
长度限制:长度下限为 1。最大长度为 240。
错误
有关所有操作的常见错误信息,请参阅常见错误。
- AccessDeniedException
-
对指定资源的访问被拒绝。
HTTP 状态代码:403
- ConflictException
-
更新或删除资源可能会导致状态不一致。
HTTP 状态代码:409
- ResourceNotFoundException
-
找不到一个或多个资源。
HTTP 状态代码:404
- ServiceQuotaExceededException
-
超过了服务配额。
HTTP 状态代码:402
- ValidationException
-
此请求的输入参数未通过验证。
HTTP 状态代码:400
另请参阅
有关在特定语言的 Amazon SDK 中使用此 API 的更多信息,请参阅以下内容: