linux下的uniq程序简介

1、简介

        这个命令读取输入文件，并比较相邻的行。在正常情况下，第二个及以后更多个重复行将被删去，行比较是根据所用字符集的排序序列进行的。该命令加工后的结果写到输出文件中。输入文件和输出文件必须不同。如果输入文件用“- ”表示，则从标准输入读取。

2、选项

   -i  忽略大小写字符的不同；
   -c  进行计数
   -u  只显示唯一的行

   -d  显示文件中连续重复出现的行。

   -n 前n个字段与每个字段前的空白一起被忽略。一个字段是一个非空格、非制表符的字符串，彼此由制表符和空格隔开(字段从0开始编号)。
   +n 前n个字符被忽略，之前的字符被跳过(字符从0开始编号)。
   -f n 与-n相同，这里n是字段数。
   -s n 与+n相同，这里n是字符数。

3、示例

1）排序之后删除了重复行，同时在行首位置输出该行重复的次数
   #sort testfile | uniq -c
   1 friend
   3 hello
   2 world

2）忽略每行的前2个字段，忽略第二个空白字符和第三个字段的首字符

     [root@stu100 ~]# uniq -f 2 -s 2 test

参考文献：http://os.51cto.com/art/201107/274991.htm