shell之常用工具（cut、sort、uniq、tr）

shell之常用工具（cut、sort、uniq、tr）

1列截取工具-cut

1.1cut概述

cut命令从文件的每一行剪切字节、字符和字段并将这些字节、字符和字段写至标准输出。

如果不指定file 参数，cut命令将读取标准输入。必须指定 -b(字节) 、-c(字符) 或 -f(第几列) 标志之一。

字符和字节的区别

• 字节（byte） ： 是计量单位，表示数据量多少，是计算机信息技术用于计量存储容量的一种计量单位，通常情况下1字节等于8位
• 字符（character） ：计算机中使用的字母、数字、字和符号
• 一般在英文状态下，一个字母或字符占用一个字节， 一个汉字占用两个字节 。

1.2常用选项

选项	功能
-b	按字节截取
-c	按字符截取，常用于中文
-d	指定以什么为分割符截取，默认为制表符
-f	通常和-d一起使用（表示截取第几列）

1.3案例参考

1.截取/etc/passwd 文件的中root用户的第7列（-d -f）

2.按字节截取

2排序工具-sort

2.1sort概述

是一个以行为单位对文件内容进行排序的工具，也可以根据不同的数据类型来排序。

例如：数据和字符的排序就不一样

2.2常用选项

选项	功能
-t	指定分隔符，默认使用[Tab]键或空格分隔
-k	指定排序区域，哪个区间排序
-n	按照数字进行排序，默认是以字母形式排序
-u	等同于uniq，表示相同的数据仅显示一行，注意：如果行尾有空格就去重就不成功
-r	反向排序，默认升序，
-o	将排序的结果转存至指定文件

2.3案例

默认以字符排序（a b c d），如果第一个字母相同，比较第二个，以此类推

去重 （sort -u）

去掉重复的内容并按顺序进行排序

指定分隔符（-t），指定排序的列（-k），升序排列

以第3列数字进行排序

指定分隔符，指定排序的列，降序排列（-r）

3 去重工具-uniq

3.1uniq概述

主要用于去除连续的重复行

注意： 是连续的行。所以通常和sort结合使用，先排序使之变成连续的行， 再执行去重操作，否则不连续的重复行它不能去重。

3.2uniq的常用选项

选项	功能
-c	统计重复的行（在它前面标上重复的次数）
-d	仅显示重复的行
-u	仅显示出现一次的行（不重复的行）

3.3案例演示

案例1：统计连续重复的行（-c）

案例2：显示连续重复的行（-d）

案例3：查看当前登录用户，去掉重复的行

4修改工具-tr

作用 转换或删除文件中的字符

4.1tr概述

• 可以用一个字符来替换另一个字符，
• 或者可以完全除去一些字符
• 还可以用来去掉重复的字符
• 从标准输入中替换，缩减和注释或删除字符，并将结果写到标准输出

4.2tr的常用选项

从标准输入中替换、缩减和/或删除字符，并将结果写到标准输出。

选项	功能
-d	删除字符
-s	删除所有重复出现的字符，只保留一个（如果是空行，全部去掉）

4.3案例分析

5总结

cut ：表示截取列

可以按照字符（-c）按照字节（-b）或者根据分割符（-d）来选取要截取的列（-f）。

sort：表示排序

默认以字母排序，数字排序需要加选项（-n），反向排序需要加选项（-r）。
还可以选择按照哪一列进行排序，需要先定义分割符（-t），然后根据分割符去选取对应的列（-k），最后进行排序。
可以将排序后的内容输入到其它文件，使用选项（-o）可以指定需要注入的文件名。
还可以将进行去重（-u），可以是不连续的行，进行去重。

uniq：表示去重

主要注意的是它必须是连续的行，不然无法去重
可以根据选项，选择显示不重复的行（-u）
还可以选择显示重复的行（-d）
还可以统计连续重复的数量（-c）

tr：表示修改字符

可以修改对应的字符，按照字符对应一一修改，如果有重复的字符，它会按照最后一个字符对应的修改字符进行替换，如果对应的字符不够时，它会将修改的最后一个字符进替换。
，不然无法去重
可以根据选项，选择显示不重复的行（-u）
还可以选择显示重复的行（-d）
还可以统计连续重复的数量（-c）

tr：表示修改字符

可以修改对应的字符，按照字符对应一一修改，如果有重复的字符，它会按照最后一个字符对应的修改字符进行替换，如果对应的字符不够时，它会将修改的最后一个字符进替换。