如何使用单个命令在 hadoop 中创建多个目录？答案

【问题标题】：How to create multiple directories in hadoop using single command?如何使用单个命令在 hadoop 中创建多个目录？
【发布时间】：2016-11-23 19:33:57
【问题描述】：

我想每年创建 365 个文件夹。我在下面添加了我尝试过的内容供您参考。请建议我在 hadoop 2 中一次性创建多个文件夹。

hdfs dfs -mkdir /mnt/hadoop/Ram/Birla/home/inside/{dt=2016-11-01,dt=2016-11-02,dt=2016-11-03,dt=2016-11-04,dt=2016-11-05,dt=2016-11-06,dt=2016-11-07,dt=2016-11-08,dt=2016-11-09,dt=2016-11-10,dt=2016-11-11,dt=2016-11-12,dt=2016-11-13,dt=2016-11-14,dt=2016-11-15,dt=2016-11-16,dt=2016-11-17,dt=2016-11-18,dt=2016-11-19,dt=2016-11-20,dt=2016-11-21,dt=2016-11-22,dt=2016-11-23}

【问题讨论】：

标签： linux hadoop hadoop2

【解决方案1】：

您可以编写一个 shell 脚本，从 '2016-01-01' 上的一个变量开始，然后在循环中递增它直到年底，同时在循环中执行您的命令。像这样的：

FIRST_DAY="2016-01-01"
for i in {0..364}
do
   DAY=$(date +%m-%d-%Y -d "$FIRST_DAY + $i day")
   hdfs dfs -mkdir /mnt/hadoop/Ram/Birla/home/inside/$DAY
done

见How to increment a date in a bash script

【讨论】：

非常感谢。真的很有帮助。