这里介绍4个软件:
- 文本重复去除器
- excel
- UltraEdit
- cnbook
------
文本重复去除器 v1.0
介绍:去除记事本中重复的行.经测试,1万行的TXT文本,只需数秒就能完成.
缺点:一次只能导入一个txt文件。速度还不错。
下载:http://www.crsky.com/soft/14310.html (免费)
excel
介绍:这个大家都熟悉了。
方法:将txt文件中词语,复制黏贴到excel一列。选中该列,然后选择“数据”->“筛选”->“高级筛选”,在弹出的对话框中选中“选择不重复的记录”就可以了。
下载:安装了office,自带excel。
UltraEdit
介绍:这个很常用了,
方法:打开UltraEdit-->文件-->排序-->高级排序/选项-选中【删除重复项】
缺点:删除重复行,却自动进行排序。和原来的文件顺序不同。
下载:http://www.onlinedown.net/soft/7752.htm (试用版)
cnbook
介绍:一个牛人开发的。详细介绍参考:http://tieba.baidu.com/f?kz=311456159
功能:在cnbook中还有一个“多文件删除重复行”的功能。选择“文件”->“批处理”,选择要处理的文件,在“可选择的处理”列表中选择“多文件删除重复行”。
下载:http://www.fmddlmyy.cn/download/cnbook.zip (内测免费版)