直观展示 Amazon Glue 流式传输指标 - Amazon Glue
Amazon Web Services 文档中描述的 Amazon Web Services 服务或功能可能因区域而异。要查看适用于中国区域的差异,请参阅 中国的 Amazon Web Services 服务入门 (PDF)

直观展示 Amazon Glue 流式传输指标

要绘制视觉指标:

  1. 转到 Amazon CloudWatch 控制台中的指标,然后选择浏览选项卡。然后在“自定义命名空间”下选择 Glue

    屏幕截图显示了如何在监控 Amazon Glue 流式处理作业时在 Amazon CloudWatch 控制台中访问指标。
  2. 选择作业指标以显示所有作业的指标。

  3. 依次按 JobName=glue-feb-monitoring 和 JobRunId=ALL 筛选指标。您可以单击“+”号(如下图所示),将其添加到搜索筛选条件。

  4. 选中您感兴趣的指标对应的复选框。在下图中,我们选择了 numberAllExecutorsnumberMaxNeededExecutors

    屏幕截图显示了如何在监控流式处理作业时对指标应用平均值。
  5. 选择这些指标后,您可以转到绘成图表的指标选项卡,应用您的统计数据。

  6. 由于指标每分钟发出一次,因此可以对 batchProcessingTimeInMsmaxConsumerLagInMs 应用一分钟的“平均值”。对于 numRecords,您可以应用每分钟的“总和”值。

  7. 您可以使用选项选项卡为图表添加水平 windowSize 注释。

    屏幕截图显示了在监控流式处理作业时为图表添加 windowSize 注释。
  8. 选择指标后,创建控制面板并添加。下面是一个示例控制面板。

    屏幕截图显示了一个监控流式处理作业的示例控制面板。