uniq
-d #只显示文件中重复的行
-c #显示文件中每行中重复的次数
-D #显示文件中所有重复的行 注意:不能和以上两个参数一起使用
使用方式
uniq -D [文件名]|uniq -d -c
#先显示出文件中重复的行,在显示的重复的次数
测试
[root@nginx /test]# cat 1.txt
11111111111111111111111111112222222222222223333333333333333333333333444444444444444444444444
11111111111111111111111111112222222222222223333333333333333333333333444444444444444444444444
11111111111111111111111111112222222222222223333333333333333333333333444444444444444444444444
11111111111111111111111111112222222222222223333333333333333333333333444444444444444444444444
11111111111111111111111111112222222222222223333333333333333333333333444444444444444444444444
11111111111111111111111111112222222222222223333333333333333333333333444444444444444444444444
11111111111111111111111111112222222222222223333333333333333333333333444444444444444444444444
11111111111111111111111111112222222222222223333333333333333333333333444444444444444444444444
11111111111111111111111111112222222222222223333333333333333333333333444444444444444444444444
11111111111111111111111111112222222222222223333333333333333333333333444444444444444
11111111111111111111111111112222222222222223333333333333333333333333444444444444444
11111111111111111111111111112222222222222223333333333333333333333333444444444444444
11111111111111111111111111112222222222222223333333333333333333333333444444444444444
11111111111111111111111111112233333333333333444444444444444
111111111111111111111111111133333444444444444444
11111111111111111111111111112222222222222223333333333333333333333333444444444444444
11111111111111111111111111112222222222222223333333333333333333333333444444444444444
11111111111111111111111111112222222222222223333333333333333333333333444444444444444
11111111111111111111111111112222222222222223333333333333333333333333444444444444444
11111111111111111111111111112222222222222223333333333333333333333333444444444444444
4444444444444
4444444444444
4444444444444
4444444444444
4444444444444
4444444444444
#################### 4444444444444
#################### 4444444444444
#################### 4444444444444
#################### 4444444444444
#################### 4444444444444
#################### 4444444444444
#################### 4444444444444
[root@nginx /test]# uniq -D 1.txt |uniq -d -c
9 11111111111111111111111111112222222222222223333333333333333333333333444444444444444444444444
9 11111111111111111111111111112222222222222223333333333333333333333333444444444444444
6 4444444444444
3 #################### 4444444444444
4 #################### 4444444444444