删除文件里的重复行

删除文件里的重复行分两种情况：

1. 删除所有重复行（一行不留）

sort file | uniq -u

　　

2. 删除多余的重复行 （留下重复行中的一行）

awk \'!seen[$0]++\' file