一台主要的计算机master,在HDFS中担任NAMENODE 在mapreduce2担任RESOURCEMANAGER的角色

1、配置data1虚拟机

ssh data1
 

hadoop 配置Hadoop集群,Ubuntu16.04

sudo rm -rf /usr/local/hadoop/tmp/dfs
 

删除文件夹下的内容

mkdir -p /usr/local/hadoop/tmp/dfs/data
 

修改拥有者

sudo chown -R hadoop:hadoop /usr/local/hadoop/
 

退出链接

exit

重复以上的动作,逐一修改data2 data3

回到master本机,继续进行操作

hadoop 配置Hadoop集群,Ubuntu16.04

注意文件夹的名字

全部设置完成之后,格式化目录 NameNode HDFS

./bin/hdfs namenode -format
 

成功之后的截图

hadoop 配置Hadoop集群,Ubuntu16.04

hadoop 配置Hadoop集群,Ubuntu16.04

 

拖到最后,出现successfully说明成功

同时启动HDFS和YARN:

 ./sbin/start-all.sh
hadoop 配置Hadoop集群,Ubuntu16.04

hadoop 配置Hadoop集群,Ubuntu16.04

 

查看master(NaneNode)的进程是否启动

hadoop 配置Hadoop集群,Ubuntu16.04

HDFS的功能:NameNode,secondaryNameNode

YARN的功能:RESOURCEMANAGER

链接到data1,查看DATA1服务器的状态

hadoop 配置Hadoop集群,Ubuntu16.04

看到data1的DataNode已经启动

相关文章:

  • 2021-09-07
  • 2021-06-20
  • 2021-06-10
  • 2021-03-31
  • 2021-12-06
  • 2021-09-10
  • 2021-04-26
  • 2021-05-03
猜你喜欢
  • 2021-12-02
  • 2021-09-19
  • 2021-03-28
  • 2021-11-27
  • 2021-07-08
  • 2021-04-03
  • 2021-06-26
相关资源
相似解决方案