检查一个文件中的字符串是否出现在另一组文件中，列出那些没有的

Question

我有一种情况，我有大量文件，我需要检查它们是否包含列出的字符串，每行一个，在另一个文件中，并报告它们不包含的地方。 VLAN列表中的字符串匹配文件和要检查的大量文件是我们核心交换机的'show mac-address'的周期输出，这些是一堆txt文件。我正在使用 Linux Bash shell。

我可以很容易地使用 grep 覆盖匹配...

cat *.txt > [MAC-File] && fgrep -of [VLAN-File] [MAC-File] | sort -h | uniq -c

这给了我一个匹配的 VLAN 列表以及 txt 文件中的行数。这是一个进步，但我需要找到其中没有 MAC 地址的 VLAN，所以我需要扭转逻辑。我的搜索告诉我 grep 与 -o 没有相反的条件，所以我需要找到一个替代方案。这将应用于 3 个非常大的 LAN，每个 LAN 中都有数百个 VLAN，我不想将结果输入到 Excel 电子表格中！

请注意，我正在检查的文件每行的数据比仅 VLAN 编号的数据多，因此比较行不起作用。

要查找（或不查找！）字符串的第一个文件的格式为..

 100
 103 
 230

请注意，我在每个数字之前和之后都有空间以使它们唯一，因此它们仅匹配我正在检查的大数据文件的第二列格式

6c4b-904b-0c5c   230        Learned          BAGG103                  Y

Answer 1

由于您使用fgrep，它是grep -F 的同义词，我们知道模式文件是固定字符串。要查找哪些模式不匹配，请使用以下方法：

$ grep -oFf pattern_file search_file | grep -voFf - pattern_file

如果是 OP，则变为：

$ grep -oFf [VLAN-File] [MAC-File] | grep -voFf - [VLAN-File]

您也可以使用 awk 一次性完成：

$ awk '(NR==FNR){a[$0];next}($2 in a){a[$2]++}END{for(i in a) if (a[i]==0) print i}' [VLAN-File] [MAC-File]

以上内容适用于完全匹配，因此不需要额外的空格。如果你想保留多余的空格，那就有点棘手了：

$ awk '(NR==FNR){a[$0];next}
       {for(i in a) if (i ~ $0) a[i]++}
       END{for(i in a) if (a[i]==0) print i}' [VLAN-File] [MAC-File]

以上所有内容都将打印 MAC-File 中未出现的 VLAN-File 条目