uniq 文本去重
用法：uniq +选项+文件名
示例1：cat 1.txt
uniq 1.txt #不加参数去除重复的行（重复行的定义是完全一样，复制粘贴）
-c 参数：统计重复行出现的次数
uniq -c 1.txt
-d 参数：只显示文件中有重复的行且只显示一次
uniq -d 1.txt
-D参数：与-d类似，显示所有重复的行
uniq -D 1.txt
-u参数：只显示不重复的行
uniq -u 1.txt
更多参数请参考：http://linux.51yip.com/search/uniq