通过

在基于 Linux 的 HDInsight 上访问 Apache Hadoop YARN 应用程序日志

  • 项目

了解如何在 Azure HDInsight 中的 Apache Hadoop 群集上访问 Apache Hadoop YARN (Yet Another Resource Negotiator) 应用程序日志。

什么是 Apache YARN？

YARN 通过将资源管理与应用程序计划/监视相分离来支持多种编程模型（Apache Hadoop MapReduce 就是其中之一）。 YARN 使用全局 ResourceManager (RM)、按工作器节点的“NodeManagers”(NM) 和按应用程序的“ApplicationMasters”(AM)。 按应用程序 AM 与 RM 协商用于运行应用程序的资源（CPU、内存、磁盘、网络）。 RM 与 NM 合作来授予这些资源（以容器的形式授予）。 AM 负责跟踪 RM 为其分配容器的进度。 根据应用程序性质，应用程序可能需要多个容器。

每个应用程序可能包含多个 应用程序尝试。 如果应用程序失败，可能会重试进行新的尝试。 每次尝试都在容器中运行。 在某种意义上，容器提供了由 YARN 应用程序完成的基本工作单位的上下文。 在容器的上下文中完成的所有工作均在给定容器的单个工作器节点上执行。 请参阅 Hadoop：编写 YARN 应用程序或 Apache Hadoop YARN 以获取更多参考信息。

若要通过缩放群集来支持更高的处理吞吐量，可参阅自动缩放或使用一些不同的语言手动缩放群集。

YARN Timeline Server

Apache Hadoop YARN Timeline Server 提供有关已完成应用程序的一般信息

YARN Timeline Server 包括以下类型的数据：

  • 应用程序 ID（应用程序的唯一标识符）
  • 启动应用程序的用户
  • 尝试完成应用程序的相关信息
  • 任何给定应用程序尝试所用的容器

YARN 应用程序和日志

应用程序日志（和关联的容器日志）在对有问题的 Hadoop 应用程序进行调试上相当重要。 YARN 提供一个良好的框架，用于使用日志聚合收集、聚合和存储应用程序日志。

日志聚合功能使访问应用程序日志更具确定性。 它聚合工作器节点上所有容器的日志，并将其存储为一个聚合日志文件（每个工作器节点）。 应用程序完成后，日志存储在默认文件系统上。 应用程序可能使用数百或数千个容器，但在单个工作器节点上运行的所有容器的日志始终聚合成单个文件。 因此，在每个工作器节点上，应用程序只使用一个日志。 在 HDInsight 群集版本 3.0 和更高版本上，日志聚合默认已启用。 聚合日志位于群集的默认存储中。 下面的路径是日志的 HDFS 路径：

/app-logs/<user>/logs/<applicationId>

在此路径中，user 是启动应用程序的用户的名称。 applicationId 是 YARN RM 分配给应用程序的唯一标识符。

无法直接阅读聚合日志，因为它们是以 TFile（由容器编制索引的二进制格式）编写的。 使用 YARN ResourceManager 日志或 CLI 工具以纯文本的形式查看感兴趣的应用程序或容器的这些日志。

ESP 群集中的 Yarn 日志

必须将两个配置添加到 Ambari 中的自定义 mapred-site。

  1. 在 Web 浏览器中，导航到 https://CLUSTERNAME.azurehdinsight.cn，其中 CLUSTERNAME 是群集的名称。

  2. 在 Ambari UI 中，导航到“MapReduce2”>“配置”>“高级”>“自定义 mapred-site” 。

  3. 添加以下属性集之一：

    集 1

    mapred.acls.enabled=true
mapreduce.job.acl-view-job=*

    集 2

    mapreduce.job.acl-view-job=<user1>,<user2>,<user3>

  4. 保存更改并重启所有受影响的服务。

YARN CLI 工具

  1. 使用 ssh 命令连接到群集。 编辑以下命令（将 CLUSTERNAME 替换为群集的名称），然后输入该命令：

    ssh sshuser@CLUSTERNAME-ssh.azurehdinsight.cn

  2. 使用以下命令列出当前正在运行的 Yarn 应用程序的所有应用程序 ID：

    yarn top

    记下 APPLICATIONID 列中要下载其日志的应用程序 ID。

    YARN top - 18:00:07, up 19d, 0:14, 0 active users, queue(s): root
NodeManager(s): 4 total, 4 active, 0 unhealthy, 0 decommissioned, 0 lost, 0 rebooted
Queue(s) Applications: 2 running, 10 submitted, 0 pending, 8 completed, 0 killed, 0 failed
Queue(s) Mem(GB): 97 available, 3 allocated, 0 pending, 0 reserved
Queue(s) VCores: 58 available, 2 allocated, 0 pending, 0 reserved
Queue(s) Containers: 2 allocated, 0 pending, 0 reserved

                  APPLICATIONID USER             TYPE      QUEUE   #CONT  #RCONT  VCORES RVCORES     MEM    RMEM  VCORESECS    MEMSECS %PROGR       TIME NAME
 application_1490377567345_0007 hive            spark  thriftsvr       1       0       1       0      1G      0G    1628407    2442611  10.00   18:20:20 Thrift JDBC/ODBC Server
 application_1490377567345_0006 hive            spark  thriftsvr       1       0       1       0      1G      0G    1628430    2442645  10.00   18:20:20 Thrift JDBC/ODBC Server

  3. 可通过运行下列命令之一以纯文本格式查看这些日志：

    yarn logs -applicationId <applicationId> -appOwner <user-who-started-the-application>
yarn logs -applicationId <applicationId> -appOwner <user-who-started-the-application> -containerId <containerId> -nodeAddress <worker-node-address>

    运行这些命令时，请指定 <applicationId>、<user-who-started-the-application>、<containerId> 和 <worker-node-address> 信息。

其他示例命令

  1. 使用以下命令下载所有应用程序主机的 Yarn 容器日志。 此步骤会以文本格式创建名为 amlogs.txt 的日志文件。

    yarn logs -applicationId <application_id> -am ALL > amlogs.txt

  2. 使用以下命令只会下载最新应用程序主机的 Yarn 容器日志：

    yarn logs -applicationId <application_id> -am -1 > latestamlogs.txt

  3. 使用以下命令下载前两个应用程序主机的 YARN 容器日志：

    yarn logs -applicationId <application_id> -am 1,2 > first2amlogs.txt

  4. 使用以下命令下载所有 Yarn 容器日志：

    yarn logs -applicationId <application_id> > logs.txt

  5. 使用以下命令下载特定容器的 Yarn 容器日志：

    yarn logs -applicationId <application_id> -containerId <container_id> > containerlogs.txt

YARN ResourceManager UI

YARN ResourceManager UI 在群集头节点上运行。 可通过 Ambari web UI 访问它。 使用以下步骤查看 YARN 日志：

  1. 在 Web 浏览器中导航到 https://CLUSTERNAME.azurehdinsight.cn 。 将 CLUSTERNAME 替换为 HDInsight 群集的名称。

  2. 从左侧的服务列表中，选择“YARN” 。

    已选择 Apache Ambari Yarn 服务。

  3. 在“快速链接”下拉列表中，选择其中一个群集头节点，并选择“ResourceManager Log”。

    Apache Ambari Yarn 快速链接。

    此时将显示 YARN 日志的链接列表。

后续步骤