下面给大家分享一下我在安装Hadoop时候的一些步骤记录,希望能给大家带来帮助,我安装的是单节点的伪分布式。

      1.基本环境:VMware8.0 + CentOS 6.0

  2.软件版本:hadoop-0.20.2-cdh3u1.tar.gz + jdk-6u29-linux-i586.bin

 

第一步,将所需要的软件从本地共享到虚拟机,我们可以使用VMware Tools的Share共享文件夹功能

      我们在/usr下新建/hadoopsoft文件夹,把需要的软件拷贝进去:

 Hadoop安装记录(伪分布式)

 

第二步,安装jdk

     首先改变hadoopsoft目录为可执行目录,并安装jdk

Hadoop安装记录(伪分布式)

Hadoop安装记录(伪分布式)

 

第三步,安装hadoop

Hadoop安装记录(伪分布式)

 

第四步,创建hadoop的用户组,并创建相应用户hadoopuser

Hadoop安装记录(伪分布式)

Hadoop安装记录(伪分布式)

Hadoop安装记录(伪分布式)

 

第五步,配置环境变量

     打开/etc/profile:

Hadoop安装记录(伪分布式)

配置完环境变量以后需要重启一下CentOS,然后验证是否成功:

Hadoop安装记录(伪分布式)

 

第六步,配置SSH免登陆认证

Hadoop安装记录(伪分布式)

如果配置不成功需要赋予authorized_keys相应的权限!

Hadoop安装记录(伪分布式)

 

第七步,配置hadoop配置文件

  1.hadoop-env.sh 为hadoop添加java环境变量

Hadoop安装记录(伪分布式)

(为了一下配置的方便,我们先为ip配置一个host)

Hadoop安装记录(伪分布式)

同时也要修改/hadoop/conf下的masters和slaves文件,修改成相应的host名。

  2.core-site.xml

Hadoop安装记录(伪分布式)

  3.mapred-site.xml

Hadoop安装记录(伪分布式)

 

第八步,为hadoopuser用户赋予hadoop文件夹的使用权限

Hadoop安装记录(伪分布式)

 

第九步,格式化namenode

Hadoop安装记录(伪分布式)

如果格式化不成功,需要删除hadoop临时文件夹下的文件,然后重新执行namenode格式化:

Hadoop安装记录(伪分布式)

 

第十步,启动hadoop

Hadoop安装记录(伪分布式)

如果这些节点都已经启动,则代表hadoop已经正常启动,通过在浏览器里查看:

Hadoop安装记录(伪分布式)

Hadoop安装记录(伪分布式)

 

以上就是我在安装单节点hadoop的配置过程,如有什么疑问欢迎下方跟评论!

转载于:https://www.cnblogs.com/NicholasLee/archive/2012/08/27/2659029.html

相关文章: