shell命令，给文件内容去重排序

一
　　去除文件中重复的行并排序，输出到新文件

cat filename |sort|uniq > outfilename.txt

二
　　删除以 ! 开头的行并输出到新文件

sed -r ‘/^!/d’ b.txt > c.txt

三
　　整合版，去除a中重复的行并排序输出到b，然后对b去除不要的行输出到c，删除b

cat a.txt |sort|uniq > b.txt && sed -r ‘/^!/d’ b.txt > c.txt && rm b.txt