文本处理命令—sort、uniq、wc、expand、unexpand、iconv、dos2unix、unix2dos

sort命令
　　功能说明：以行为单位对文件进行排序。
　　命令格式：sort [参数] [<文件> …]
　　常用参数：
　　　-b：忽略前导的空格。
　　　-d：只考虑空格、字母和数字。
　　　-f：忽略字母的大小写。
　　　-i：只考虑可打印字符。
　　　-M：排序月份，（未知词） < “JAN” < … < “DEC”。
　　　-n：根据字符串的数值进行排序。
　　　-r：逆向排序。
　　　-u：对相同的行只输出一行。
　　　+n：n为数字，对指定的列进行排序，+0表示第1列，以空格或制表符作为列的间隔符。
　　使用示例:
$ sort file
$ sort -bd file
$ sort -bn file
$ sort -r file
$ sort -u file
$ sort +5 file
$ sort +5 -rb file
$ sort file1 file2
$ sort -br file1 file2  
　　警告：1. 本地环境变量会影响排序结果。
      　　　2. 如果希望以字节的自然值获得最传统的排序结果，请设定LC_ALL=C。
　　uniq命令
　　功能说明：删除文本文件中相邻的重复的行并写到标准输出。
　　命令格式：uniq [参数] [<输入文件> [<输出文件>]]
　　常用参数：
　　　-c：在每行前加上表示相应行目出现次数的前缀编号。
　　　-d：只显示重复的行。
　　　-i：忽略大小写差异。
　　　-u：只显示出现一次的行。
　　　-s<N>：<N>为数字，对各行前<N>个字符不作比较。
　　　-w<N>：<N>为数字，对各行第<N>个字符以后的内容不作比较。
　　使用示例：
$ uniq file
$ uniq -i file
$ uniq -cd file
$ uniq -u file  
www.au369.com
　　wc命令
　　功能说明：统计指定文本文件的行数、字数、字符数。
　　命令格式：wc [参数] [<文件>…]
　　常用参数：
　　　-c：统计输出字节数。
　　　-l：统计输出行数。
　　　-L：统计输出最长一行的长度。
　　　-w：统计输出单词数。
　　使用示例：
$wc file
$wc -l file
$wc -w file
$wc -c file
$wc -L file  
http://www.au369.com
　　expand命令
　　功能说明：将文件中的制表符转换为空格，写到标准输出。
　　命令格式：expand [参数] [<文件> …]
　　常用参数：
　　　-i：不转换非空格后的制表符。
　　　-t<N>：设定每个制表符为指定<N>的宽度，而不是默认的80
　　使用示例：
$ expand file
$ expand -t4 file  
　　unexpand命令
　　功能说明：将文件中的空格转换为制表符，写到标准输出。
　　命令格式：unexpand [参数] [<文件> …]
　　常用参数：
　　　-a：转换所有空格字符而不仅仅是字母首部的空格。
　　　--first-only：只转换首部的空格字符序列（覆盖-a选项）。
　　　-t<N>：设定每个制表符为指定<N>的宽度，而不是默认的8（激活-a选项）。
　　使用示例：
$ unexpand file
$ unexpand -t4 file  
　　iconv命令
　　功能说明：将文件从一种编码转换成另一种编码。
　　命令格式：iconv [参数] <输入文件>
　　常用参数：
　　　-f <encoding>：指定原始文本编码。
　　　-t <encoding>：指定要转换的编码。
　　　-l：列出所有己知编码字符集。
　　　-c：忽略输出中的无效字符。
　　　-o<output file>：指定输出文件，而不是在标准输出上显示。
　　　使用示例：
$ iconv -l
$ iconv -f ISO-8859-1 -t UTF-8 -o outputfile inputfile
$ iconv -f GB2312 -t UTF-8 -o outputfile inputfile
$ iconv -f GBK -t UTF-8 -o outputfile inputfile
$ iconv -f BIG5 -t UTF-8 -o outputfile inputfile
$ iconv -f UTF-8 -t GB2312 -o outputfile inputfile  
　　dos2unix命令
　　功能说明：将DOS格式的文本文件转换成UNIX格式的文本文件。
　　命令格式：dos2unix [参数] <文件> [<输出文件>]
　　常用参数：
　　　-k：不改变文件的时间戳。
　　　-n：新文件模式，即不改变原文件将转换结果保存到指定的输出文件。
　　使用示例：
$ dos2unix dosfile
$ dos2unix -n dosfile linuxfile
$ dos2unix -k *
$ dos2unix -k -n dosfile linuxfile  
　　提示：系统还提供了一个unix2dos命令，用于将UNIX格式的文本文件转换成格式的文本文件。使用方法与dos2unix命令一样。