【问题标题】:awk renamed few files and left few to renamedawk 重命名了一些文件,并留下了一些要重命名的文件
【发布时间】:2021-05-04 05:51:00
【问题描述】:

我正在尝试根据来自另一个文件的匹配文件名字符串替换部分文件名。文件名格式如下:

36872_20190806_00.csv  40800_20190806_00.csv  41883_20190806_00.csv  
38064_20190806_00.csv  40848_20190806_00.csv  41891_20190806_00.csv  
38341_20190806_00.csv  40856_20190806_00.csv  41923_20190806_00.csv  
40417_20190806_00.csv  40948_20190806_00.csv  44373_20190806_00.csv  
40745_20190806_00.csv  41217_20190806_00.csv  45004_20190806_00.csv 
40754_20190806_00.csv  41256_20190806_00.csv                

第一个 _ 之前的数字代表电台代码,我想用另一个名为 radiosonde.csv 的文件中的电台名称替换它。例如:我想要

36872_20190806_00.csv 更改为ALMATY_20190806_00.csv

38064_20190806_00.csv更改为KYZYLORDA_20190806_00.csv

radiosonde的数据如下:

CODE,LAT,LON,Elevation,STN_NAME
41620,31.35,69.467,1407,ZHOB
41600,32.5,74.5333,255,SIALKOT
41598,32.9333,73.7167,232,JHELUM
41594,32.05,72.667,188,SARGODHA
41571,33.6167,73.1,507,ISLAMABAD_AIRPORT
41560,33.8667,70.0833,1725,PARACHINAR
41529,34.0333,71.9333,329,PESHAWAR
41516,35.9167,74.3333,1453,GILGIT
41515,35.5667,71.7833,1464,DROSH
41506,35.9217,71.8,1499,CHITRAL
41316,17.0439,54.1022,23,SALALAH_AIRPORT
41288,20.667,58.9,19,MASIRAH
41256,23.5953,58.2983,8.4,MUSCAT_INTL_AIRPORT
41217,24.4333,54.65,16,ABU_DHABI_INTL_AIRPOR
41169,25.2731,51.6081,4,HAMAD_INTL_AIRPORT
40990,31.5,65.85,1010,KANDAHAR_AIRPORT
40948,34.55,69.2167,1791,KABUL_AIRPORT
40938,34.217,62.217,977,HERAT
40913,36.6667,68.9167,433,KUNDUZ
40911,36.7,67.2,378,MAZAR-I-SHARIF
40875,27.2167,56.3667,10,BANDARABBASS
40856,29.4667,60.8833,1370,ZAHEDAN
40848,29.5333,52.6,1484,SHIRAZ
40841,30.25,56.9667,1748,KERMAN
40821,31.9,54.2833,1238,YAZD
40811,31.3333,48.6667,20,AHWAZ
40809,32.8667,59.2,1491,BIRJAND
40800,32.5175,51.7061,1550.4,ESFAHAN
40754,35.6833,51.3167,1204,TEHRAN-MEHRABAD
40745,36.2667,59.6333,999,MASHHAD
40427,26.267,50.617,2,BAHRAIN
40417,26.45,49.8167,22,KING_FAHD_INTL_AIRPORT
40416,26.267,50.167,19,DHAHRAN
3992,10.83,106.97,11,AN_LOC
38989,35.9,62.9667,375,TAGTABAZAR
38954,37.5,71.5,2077,KHOROG
38927,37.233,67.267,310,TERMEZ
38880,37.987,58.361,211,ASHGABAT_KESHI
38836,38.55,68.783,800,DUSHANBE
38750,37.467,53.967,-22,ESENGYLY
38687,39.083,63.6,190,CHARDZHEV
38613,40.917,72.95,765,DZHALAL-ABAD
38606,40.55,70.95,499,KOKAND
38599,40.217,69.733,427,KHUDJAND
38507,40.0333,52.9833,90,TURKMENBASHI
38457,41.267,69.267,493,TASHKENT
38413,41.733,64.617,237,TAMDY
38392,41.833,59.983,87,DASHKHOVUZ
38353,42.833,74.583,760,BISHKEK
38341,42.85,71.3,652,TARAZ
38064,44.7667,65.5167,133.4,KYZYLORDA
38001,44.55,50.25,-25,FORT SHEVCHENKO
37985,38.733,48.833,-11,LANKARAN
37860,40.5333,50,27,MASHTAGA
36974,41.433,76,2041,NARYN
36872,43.3633,77.0042,662.7,ALMATY
36859,44.167,80.067,645,ZHARKENT
3369,22.77,88.37,0,BARAKPUR
3368,25.88,89.43,0,LALMANIR_HAT

我查看了this question。按照那里的建议,我试过了:

sort -r radiosonde.csv | awk -F"," '{print "for files in *00.csv; do mv $files ${files/" $1 "/" $5 "}; done" }'  | bash

它在某种意义上确实有效。它重命名了一些文件并保留了一些文件,并给出了错误:

bash: line 25: unexpected EOF while looking for matching `''
bash: line 113: syntax error: unexpected end of file

我不明白为什么它对某些文件的行为如此奇怪。如果我将这些文件名放入另一个文件中,例如 test.csv 并再次使用上述命令,即

sort -r test.csv | awk -F"," '{print "for files in *00.csv; do mv $files ${files/" $1 "/" $5 "}; done" }'  | bash

然后它将重命名之前留下的所有文件。有没有办法使用shell脚本来做到这一点。我尝试了以下脚本但没有用:

for file in *00.csv ; do 
         mv $files ${files/" $1 "/" $5 "}; 
done < radiosonde.csv

【问题讨论】:

  • 您尝试遵循的建议是一个实施不当的坏主意,将其输出的 shell 代码复制粘贴到 shellcheck.net 中,它会告诉您 一些问题。正确编写 shell 已经够难的了,更不用说尝试正确编写 awk 来生成正确的 shell,而且完全没有必要这样做。请将您的示例减少到 3 个文件,而不是 50 个文件,或者对于 CSV 中的行数相同的文件,并添加给定输入的预期输出,以便我们为您提供帮助。
  • 再次,请将您的示例减少为 3 个文件,而不是 50 个(或现在 17 个)或更多文件,并且 CSV 中的行数相同并根据该输入添加预期输出,以便我们为您提供帮助。我们没有理由必须遍历所有这些数据来尝试了解您的问题,如果您不提供预期的输出,我们就无法测试潜在的解决方案。提问时总是发minimal reproducible example,强调Minimal
  • @EdMorton 我已经编辑了我的问题并提到了所需的输出格式。如果我会减少radiosonde.csv 中的行数,那么效果会很好。如果radiosonde.csv 中的行数更多,我必须重命名数百个文件,并且以上命令的行为会很奇怪。
  • 上次:您的文件列表仍然是不必要的 17 个文件,而 3 个文件可以做,您的 CSV 在 3 行可以做的情况下不必要地长约 50 行,并提及输出格式(或仅显示17 行输入的 2 行输出)是不够的 - 显示实际的预期输出给定您发布的输入。见How to Ask
  • @EdMorton 对于上面的 3 或 10 个文件,命令运行良好,因此不会出现问题。预期的输出是有问题的,我想用 radiiosonde.csv 中的相应电台名称更改电台代码(第一个 _ 之前的数字)。例如。 36872_20190806_00.csvALMATY_20190806_00.csv。这里 ALMATY 是 radiosonde.csv 中电台代码36872 对应的电台名称

标签: linux shell awk file-rename mv


【解决方案1】:

这个呢:

确保 radiosonde.csv 文件与您要重命名的所有 csv 文件位于同一目录中。

$ cd <directory of radiosonde.csv, 36872_20190806_00.csv, 38064_20190806_00.csv and so on...>
$ ls *.csv > .tmp; awk -F ',' '{name[$1]=$5}END{for(;(getline filename < ".tmp")>0;){ori=filename;sub(/_.+$/,"",filename);pre=filename;sub(/^[0-9]+/,"",ori);post=ori;if(name[pre]!="")system("mv " pre post " " name[pre] post)}} ' 'radiosonde.csv'
$ rm -f '.tmp'

解释:

  • ls *.csv &gt; .tmp -> 列出当前目录中的所有文件并将它们写入.tmp
  • awk -F ',' -> 将 ,(逗号)设置为 awk 的字段分隔符。因为我们想将41620,31.35,69.467,1407,ZHOB 之类的行拆分为单独的字段。然后我们可以通过$1$2$3等方式获取。
  • '{ ... }END{}' -> 这是 awk 的块。第一个块用于读取输入文件,后面的块将在 awk 程序退出之前执行。
  • 'radiosonde.csv' 将此设置为输入文件以供 awk 读取。
  • '{name[$1]=$5}' -> $1 是第一个字段,$5 是第 5 个字段。在这种情况下,$1 将是 4162041600 等等,$5 将是 ZHOBSIALKOT 等等。名称是一个数组。当我们读取第一行时,我们将name[CODE]=STN_NAMEname[41620]=ZHOB 设置为第二行。
  • END{}' -> 设置完所有需要的变量后,我们需要重命名文件,END{} 是我们可以用于此目的的块之一。
  • for(;(getline filename &lt; ".tmp")&gt;0;) {} -> 这是用于读取包含我们要重命名的文件列表的 .tmp 文件。
  • ori=filename; -> 将变量 filename 设置为另一个变量。这是因为我们想使用sub() 函数来改变变量,但仍然需要filename 变量来获取文件名的剩余部分。
  • sub(/_.+$/,"",filename); -> 这是删除我们不想删除的字符。在这种情况下,从字符 _ 到结尾。例如,如果filename41620_20190806_00.csv,则_20190806_00.csv 将被删除,filename 将变为41620
  • pre=filename; -> 为清楚起见,将 filename 设置为另一个名为 pre 的变量。
  • sub(/^[0-9]+/,"",ori); -> 这将删除前导数字,因此 ori 将变为 _20190806_00.csv
  • post=ori; -> 在本例中将 ori 设置为另一个变量 post
  • if(name[pre]!="") -> 因为radiosonde.csv 将在.tmp 中并且不是我们要重命名的文件之一,所以我们需要这个if 语句,这样我们就不会收到下一个命令的任何错误。 name[radiosonde] 将为空。
  • system("mv " pre post " " name[pre] post) -> 这个语句的作用是重命名你的文件。如果pre41620 并且post_20190806_00.csv,那么这个语句可以翻译成这个"mv 41620_20190806_00.csv ZHOB_20190806_00.csv"
  • rm -f '.tmp' -> 删除 .tmp 文件,因为我们不再需要它了。

忽略我下面的推荐。我们确实需要if 声明。

【讨论】:

  • 哇...它对所有文件都完美无缺。你能解释一下你使用的awk 命令的语法吗?
  • if(name[pre]="") 声明可能是不必要的。好吧,我猜没关系。
猜你喜欢
  • 2010-10-15
  • 1970-01-01
  • 1970-01-01
  • 2017-02-22
  • 2019-06-25
  • 2014-02-17
  • 1970-01-01
  • 2014-07-30
  • 2012-03-05
相关资源
最近更新 更多