Hadoop Yarn 守护进程停止运行

【问题标题】：Hadoop Yarn Daemons Stop RunningHadoop Yarn 守护进程停止运行
【发布时间】：2014-01-13 13:40:42
【问题描述】：

在 jps 之后运行 start-dfs.sh 和 start-yarn.sh 会得到以下输出：

8227 ResourceManager
8328 NodeManager
7804 NameNode
8366 Jps
8077 SecondaryNameNode
7901 DataNode

如果我在大约 5 秒后运行 jps，则输出为：

7804 NameNode
8473 Jps
8077 SecondaryNameNode
7901 DataNode

两个纱线守护进程（ResourceManager 和 NodeManager）由于某些原因停止工作。知道为什么会发生这种情况吗？

【问题讨论】：

【解决方案1】：

这通常发生在启动服务时出现问题。可能有很多问题 - 缺少配置、权限问题等。

您必须检查 ResourceManager 和 NodeManager 的日志以了解更多详细信息。

【讨论】：

是的，有很多不同的东西。具体来说，我必须修改 yarn-site.xml 和 mapred-site.xml 配置文件。
@Olshansk 您能否提及您必须修改哪些属性？
不幸的是，这是很久以前的事了，我真的不记得了。如果我记得，它与我为整个集群分配的内存总量、映射器/减速器的数量以及每个映射器和减速器的最小/最大内存有关。如果您仍然卡住，请告诉我。我可能可以挖掘这个项目并查看我的 git 历史记录。