Amazon EMR
管理指南
AWS 文档中描述的 AWS 服务或功能可能因区域而异。要查看适用于中国区域的差异,请参阅中国的 AWS 服务入门

查看应用程序历史记录摘要

对于 5.8.0 版及更高版本的 Amazon EMR,您可以从 Amazon EMR 控制台中的 Application history (应用程序历史记录) 选项卡查看应用程序历史记录摘要。在应用程序完成后,Amazon EMR 会将应用程序历史记录摘要保留 7 天。

以下序列演示如何使用集群详细信息页面上的 Application history (应用程序历史记录) 通过 Spark 或 YARN 应用程序向下钻取作业详细信息。要查看集群详细信息,请从 Clusters (集群) 列表中选择集群 Name (名称)。要查看有关 YARN 容器日志的信息,您必须为集群启用日志记录。有关更多信息,请参阅配置集群日志记录和调试。对于 Spark 应用程序历史记录,摘要表中提供的信息只是可通过 Spark 历史记录服务器 UI 获得的信息的一部分。

在下面的 Application history (应用程序历史记录) 选项卡示例中,展开两个行以显示两个不同的 Spark 应用程序的诊断摘要,然后选择 Application ID (应用程序 ID) 以查看更多的应用程序详细信息。

YARN application (YARN 应用程序) 详细信息的 Jobs (作业) 选项卡上,选择 Job 0 的描述以查看 Job 0 详细信息。

在 Job 0 详细信息页面上,展开有关各个作业阶段的信息,然后选择 Stage 1 的 Description (描述) 以查看 Stage 1 详细信息。

Stage 1 详细信息页面上,可看到阶段任务和执行程序的关键指标,并可使用链接查看任务和执行程序日志。