为一个目录中的所有文件生成MD5sum，并在另一个目录中获取它们的匹配项答案

【问题标题】：Generate MD5sum for all files in a directory, and get their matches in another directory为一个目录中的所有文件生成MD5sum，并在另一个目录中获取它们的匹配项
【发布时间】：2018-10-09 21:12:52
【问题描述】：

我有 2 个目录。 livedir 包含 2000 个 fmx 文件，testdir 包含 6000 个带有时间戳的 fmb。我将testdir 中的所有fmb 编译为fmx 以将它们与livedir 中的fmx 匹配。

我创建了以下脚本来获取livedir中所有文件的MD5SUM并搜索它们是否存在于testdir中：

testdir='/home/oracle/ideatest/test/'
livedir='/home/oracle/ideatest/live/'
cd /home/oracle/ideatest/live/

for f in *; do
    livefile=$(md5sum "$f" | cut -d" " -f1)
    sourcefile=$(md5sum "$testdir""$f" | cut -d" " -f1)
    if [[ -f $f ]] && [ $livefile == $sourcefile ]; then
        echo "$f" "OK-----------------------------"
        echo "$sourcefilename"
        cp /home/oracle/bankplus/ideatest/test/$f  /home/oracle/bankplus/ideatest/live2/$f
        #el moshkla f 2sm el file 3ayzo mn 3'er hash
    else
        echo "$f" "MODIFIED"
    fi
done

该脚本仅在两个目录中存在同名文件时才有效。这是因为我循环使用了同名$f：

sourcefile=$(md5sum "$testdir""$f" | cut -d" " -f1)

结果cp 只复制一个文件，尽管我在testdir 中有多个具有相同哈希值的文件。

【问题讨论】：

我对更大的目标感到困惑，但听起来您需要创建一个临时文件，列出一个目录中所有文件的 MD5（例如md5sum "$somedir"/* >"$tmpfile"），然后为其他目录，扫描该临时文件以查找匹配的哈希值。

标签： linux bash md5sum

【解决方案1】：

如果您的 bash 版本是 4.2 或更高版本，如何使用关联数组：

#!/bin/bash

testdir="/home/oracle/ideatest/test"
livedir="/home/oracle/ideatest/live"

declare -A hash

# 1st step: create a hash table of md5sum in $testdir
for f in $(find "$testdir" -type f); do
    md5sum=$(md5sum "$f" | cut -d" " -f1)
    hash[$md5sum]=${f##*/}  # holds md5sum as a key and filename as a value
done

# 2nd step: loop over files in $livedir and test if md5sum value of a file
# exists in $testdir
for f in $(find "$livedir" -type f); do
    basename=${f##*/}
    md5sum=$(md5sum "$f" | cut -d" " -f1)
    if [[ -n "${hash[$md5sum]}" ]]; then
        echo "$basename" "OK-----------------------------"
        echo "${hash[$md5sum]}"
        cp "/home/oracle/bankplus/ideatest/test/$basename" "/home/oracle/bankplus/ideatest/live2/$basename"
    else
        echo "$basename" "MODIFIED"
    fi
done

希望这会有所帮助。

【讨论】：

谢谢你，它确实有效，但我已经开始工作了，我会在下面发布答案

【解决方案2】：

我通过使用它来工作

testdir='/home/oracle/ideatest/test/'
livedir='/home/oracle/ideatest/live/'
cd /home/oracle/bankplus/ideatest/live/
        for f in *;
                 do
                        livefile=$(md5sum "$f" | cut -d" " -f1)
        for l in "$testdir"*
                 do
                        sourcefile=$(md5sum "$l" | cut -d" " -f1)
         done
                        [[ -f $f ]] && if [ $livefile == $sourcefile ]
                 then
                         echo "$f" "Found a HASH Match Copied to live2-";
                         cp $l  /home/oracle/ideatest/live2/
                 else
                         echo "$f" "MODIFIED";
                         fi;
         done

【讨论】：