Amazon EMR
Amazon EMR 版本指南
AWS 文档中描述的 AWS 服务或功能可能因区域而异。要查看适用于中国区域的差异,请参阅 Amazon AWS 入门

查看 Spark 应用程序历史记录

Amazon EMR 收集来自集群上的 YARN 应用程序的信息,并在应用程序完成后将历史信息保存长达 7 天的时间。详细信息对 Spark 应用程序可用。利用此功能,您可在 Spark 历史记录服务器的 Web 界面中查看以其他方式提供的数据,而不必为连接到集群的主节点而建立可能复杂的 SSH 隧道。您还可以识别和打开相关的日志文件,其方法比连接到主节点并搜索文件结构的方法要容易得多。

查看 Spark 应用程序历史记录

  1. Clusters 列表中,选择集群的 Name,然后选择 Application history

    每个应用程序均按 Application ID 列出。

  2. 展开行以查看应用程序的基本诊断信息或选择 Application ID 以查看其他详细信息。

有关更多信息,请参阅 Amazon EMR 管理指南 中的查看应用程序历史记录