在基于 Linux 的 HDInsight 上为 Apache Hadoop 服务启用堆转储

堆转储包含应用程序的内存快照，包括创建转储时变量的值。因此，它们可用于诊断运行时发生的问题。

Services

可以为以下服务启用堆转储：

还可以为 HDInsight 运行的映射和化简进程启用堆转储。

启动服务时，通过将选项（有时称为“选择”或“参数”）传递给 JVM 来启用堆转储。对于大多数 Apache Hadoop 服务，可以修改用于启动服务的 shell 脚本来传递这些选项。

在每个脚本中，都有导出 *_OPTS，其中包含传递给 JVM 的选项。例如，在 hadoop-env.sh 脚本中，以 export HADOOP_NAMENODE_OPTS= NameNode 服务开头的行包含选项。

映射和化简过程略有不同，因为这些作是 MapReduce 服务的子进程。每个映射或化简进程在子容器中运行，并且有两个条目包含 JVM 选项。两者都包含在 mapred-site.xml中：

注释

建议使用 Apache Ambari 修改脚本和 mapred-site.xml 设置，因为 Ambari 处理跨群集中的节点复制更改。有关特定步骤，请参阅 “使用 Apache Ambari ”部分。

在发生 OutOfMemoryError 时，以下选项将启用堆内存转储：

-XX:+HeapDumpOnOutOfMemoryError

+ 表示此选项已启用。默认值处于禁用状态。

警告

默认情况下，HDInsight 上的 Hadoop 服务未启用堆转储，因为转储文件可能很大。如果您启用这些选项进行故障排除，请记住在复现问题并收集转储文件后禁用它们。

转储文件的默认位置是当前工作目录。可以使用以下选项控制文件存储位置：

-XX:HeapDumpPath=/path

例如，使用 -XX:HeapDumpPath=/tmp 会使得转储存储在 /tmp 目录中。

还可以在 OutOfMemoryError 发生时触发脚本。例如，触发通知，以便知道错误已发生。使用以下选项在 OutOfMemoryError 上触发脚本：

-XX:OnOutOfMemoryError=/path/to/script

注释

由于 Apache Hadoop 是分布式系统，因此使用的任何脚本都必须放置在服务运行所在的群集中的所有节点上。

该脚本还必须位于服务运行方式的帐户可访问的位置，并且必须提供执行权限。例如，你可能希望将脚本存储在 /usr/local/bin 中，并使用 chmod go+rx /usr/local/bin/filename.sh 来授予读取和执行权限。

若要修改服务的配置，请使用以下步骤：