【发布时间】:2013-12-08 13:15:04
【问题描述】:
Hadoop 的最新版本提供mapred-site.xml.template
我们是否需要使用它创建一个新的mapred-site.xml 文件?
任何与 Hadoop 2.2.0 相关的文档或解释的链接将不胜感激。
【问题讨论】:
标签: apache hadoop mapreduce bigdata
Hadoop 的最新版本提供mapred-site.xml.template
我们是否需要使用它创建一个新的mapred-site.xml 文件?
任何与 Hadoop 2.2.0 相关的文档或解释的链接将不胜感激。
【问题讨论】:
标签: apache hadoop mapreduce bigdata
我相信它仍然是必需的。对于我们正在工作的基本 Hadoop 2.2.0 2 节点集群设置,我从设置文档中执行了以下操作。
"
在 Hadoop 安装的基础上,编辑 etc/hadoop/mapred-site.xml 文件。一个新的 Hadoop 2 的配置选项是指定框架名称的能力 MapReduce,设置 mapreduce.framework.name 属性。在此安装中,我们将使用 “yarn”的值告诉 MapReduce 它将作为 YARN 应用程序运行。 首先,将模板文件复制到 mapred-site.xml。
cp mapred-site.xml.template mapred-site.xml
接下来,将以下内容复制到 Hadoop etc/hadoop/mapred-site.xml 文件中,并删除原来的空标签。
<configuration>
<property>
<name>mapreduce.framework.name</name>
<value>yarn</value>
</property>
</configuration>
"
Wrt 文档,我发现this 最有用。此外,用于集群设置的 etc/hosts 配置和其他与集群相关的配置有点难以弄清楚。
【讨论】: