查看高级别应用程序历史记录 - Amazon EMR
Amazon Web Services 文档中描述的 Amazon Web Services 服务或功能可能因区域而异。要查看适用于中国区域的差异,请参阅中国的 Amazon Web Services 服务入门

查看高级别应用程序历史记录

对于 Amazon EMR 5.8.0 及更高版本,您可以从 Amazon EMR 控制台的 Application user interfaces (应用程序用户界面) 选项卡查看高级别应用程序历史记录。在应用程序完成后,Amazon EMR 会将应用程序历史记录摘要保留 7 天。

注意事项和限制

当您使用 Amazon EMR 控制台中的 Application user interfaces (应用程序用户界面) 选项卡时,请考虑以下限制。

  • Amazon EMR 仅支持 Amazon EMR 5.8.0 及更高版本的高级别应用程序历史记录功能。

  • 高级别应用程序历史记录功能不支持 Spark Streaming 应用程序。

示例:查看高级别应用程序历史记录

以下序列演示如何使用集群详细信息页面上的 Application user interfaces (应用程序用户界面) 选项卡通过 Spark 或 YARN 应用程序向下钻取任务详细信息。

要查看集群详细信息,请从 Clusters (集群) 列表中选择集群 Name (名称)。要查看有关 YARN 容器日志的信息,您必须为集群启用日志记录。有关更多信息,请参阅配置集群日志记录和调试。对于 Spark 应用程序历史记录,摘要表中提供的信息只是通过 Spark 历史记录服务器 UI 提供的信息的一个子集。

High-level application history (高级别应用程序历史记录) 下的 Application user interfaces (应用程序用户界面) 选项卡下,您可以展开一行以显示 Spark 应用程序的诊断摘要,或选择 Application ID (应用程序 ID) 链接以查看有关不同应用程序的详细信息。

当您选择 Application ID (应用程序 ID) 链接时,UI 会更改以显示该应用程序的 YARN application (YARN 应用程序) 详细信息。在 YARN application (YARN 应用程序) 详细信息的 Jobs (任务) 选项卡中,您可以选择任务的 Description (描述) 链接以显示该任务的详细信息。

在任务详细信息页面上,您可以展开有关各个任务阶段的信息,然后选择 Description (描述) 链接以查看阶段详细信息。

在阶段详细信息页面上,您可以查看阶段任务和执行程序的关键指标。您还可以使用 View logs (查看日志) 链接查看任务和执行程序日志。