删除文件里的重复行分两种情况:
1. 删除所有重复行(一行不留)
sort file | uniq -u
2. 删除多余的重复行 (留下重复行中的一行)
awk '!seen[$0]++' file
删除文件里的重复行分两种情况:
1. 删除所有重复行(一行不留)
sort file | uniq -u
2. 删除多余的重复行 (留下重复行中的一行)
awk '!seen[$0]++' file
转载于:https://www.cnblogs.com/liuyihua1992/p/11048808.html