UNIX下去除文件中重复数据的方法(转)[@more@]
去除文件中重复数据的方法:
先使用sort指令将文件中的数据按照要求的索引进行排序,然后使用uniq指令将重复数据去掉得到想要的结果。
如文件a.txt中有重复行,需要去除重复行时执行如下指令:
#sort a.txt > b.txt;
#uniq b.txt > c.txt
c.txt文件就是所需数据了.
来自 “ ITPUB博客 ” ,链接:http://blog.itpub.net/10752019/viewspace-941425/,如需转载,请注明出处,否则将追究法律责任。
转载于:http://blog.itpub.net/10752019/viewspace-941425/