Amazon Glue 中的蓝图和工作流限制 - Amazon Glue
Amazon Web Services 文档中描述的 Amazon Web Services 服务或功能可能因区域而异。要查看适用于中国区域的差异,请参阅中国的 Amazon Web Services 服务入门

Amazon Glue 中的蓝图和工作流限制

以下是蓝图和工作流限制。

蓝图限制

请记住以下蓝图限制:

  • 蓝图必须在 Amazon S3 存储桶所在的相同 Amazon 区域中注册。

  • 要跨 Amazon 账户共享蓝图,您必须授予关于 Amazon S3 中蓝图 ZIP 格式存档的读取权限。客户如果对蓝图 ZIP 格式存档具有读取权限,可以在他们的 Amazon 账户中注册蓝图并使用。

  • 蓝图参数集存储为单个 JSON 对象。此对象的最大长度为 128KB。

  • 蓝图 ZIP 格式归档文件的最大未压缩大小为 5MB。最大未压缩大小为 1MB。

  • 将工作流中任务、爬网程序和触发器的总数限制为 100 个或更少。如果包含超过 100 个,则在尝试恢复或停止工作流运行时可能会出错。

工作流程限制

请记住以下工作流限制:其中一些注释更多地针对手动创建工作流的用户。

  • Amazon EventBridge 事件触发器的最大批处理大小为 100。最大窗口大小为 900 秒(15 分钟)。

  • 一个触发器只能与一个工作流程关联。

  • 仅允许一个启动触发器(按需或计划)。

  • 如果工作流程中的某个作业或爬网程序由工作流外部的触发器启动,则工作流程中依赖于该作业或爬网程序完成(成功或其他状态)的任何触发器都不会触发。

  • 同样,如果工作流中的某个任务或爬网程序具有触发器,而该触发器依赖于工作流内外部的任务或爬网程序完成(成功或其他状态),则如果任务或爬网程序是从工作流内部启动的,只有工作流内部的触发器在任务或爬网程序完成时触发。