刚开始尝试修改一个集群节点进行扩容,然后修改了配置参数文件dfs.datanode.data.dir参数后面追加挂载的数据目录,

发现启动时正常,后面索性多修改几个节点发现集群后面修改的DataNode全部启动报错(日志记录在/var/log/hadoop/dfs/hadoop-hdfs-datanode-*.log):

Too many failed volumes - current valid volumes: 1, volumes configured: 4, volumes failed: 3, volume failures tolerated: 0

集群扩容DataNode报错:Invalid dfs.datanode.data.dir /data2/hadoop/hdfs/data : EPERM: Operation not permitt

翻到前面发现存在如下告警:

集群扩容DataNode报错:Invalid dfs.datanode.data.dir /data2/hadoop/hdfs/data : EPERM: Operation not permitt

原因:权限问题,查看正常启动的数据目录权限:

集群扩容DataNode报错:Invalid dfs.datanode.data.dir /data2/hadoop/hdfs/data : EPERM: Operation not permitt

而后面生成的/data2/hadoop/hdfs/data目录权限都是root,修改所属用户和用户组即可(如果权限不一致,修改确保跟正常启动的数据目录权限保持一致),执行如下命令:

# chown -R hdfs:hadoop data


相关文章:

  • 2022-12-23
  • 2022-12-23
  • 2022-12-23
  • 2021-09-27
  • 2022-12-23
  • 2022-12-23
  • 2022-12-23
  • 2021-12-16
猜你喜欢
  • 2021-09-15
  • 2021-05-14
  • 2021-10-27
  • 2021-12-06
  • 2021-05-09
  • 2022-12-23
相关资源
相似解决方案