1:hadoop中备份数设置:(hdfs-site.xml)

<property>
<name>dfs.replication</name>
<value>3</value>
</property>

2:hadoop中备份数修改:

hadoop dfs -setrep [-R] <path> 如果有-R将修改子目录文件的性质。hadoop dfs -setrep -w 3 -R /user/hadoop/dir1 就是把目录下所有文件备份系数设置为3.

3:hadoop中查看当前某个文件的备份数:

hadoop dfs -ls [filename]  结果行中的第二列是备份系数 (注:文件夹信息存储在namenode节点上,所以没有备份,故文件夹的备份系数是横杠)

4:hadoop集群的检查备份冗余情况:

hadoop fsck / 可以方便的看到各种类型block所占比例。

5:自动负载均衡hadoop文件:hadoop balancer

6:查看各节点的磁盘占用情况 hadoop dfsadmin -report

相关文章:

  • 2021-12-15
  • 2021-07-17
  • 2021-11-30
  • 2021-09-07
  • 2022-12-23
  • 2021-12-25
  • 2021-11-27
猜你喜欢
  • 2022-12-23
  • 2022-12-23
  • 2021-11-12
  • 2022-01-09
  • 2021-12-26
  • 2021-12-25
相关资源
相似解决方案