Shell工具

cut

cut的工作就是“剪”，具体的说就是在文件中负责剪切数据用的。
cut 命令从文件的每一行剪切字节、字符和字段并将这些字节、字符和字段输出。

基本用法

cut [选项参数] filename
选项参数：
-f 列号，提取第几列
-d 分隔符，按照指定分隔符分割列
默认分隔符是制表符

例子

[mubai@localhost test]$ touch cut.txt
[mubai@localhost test]$ vim cut.txt
mu bai
bai mu
zai  zai
na  zhei

[mubai@localhost test]$ cut -d " " -f 2,3 cut.txt 
bai
mu
zai
zhei
[mubai@localhost test]$ cat cut.txt | grep "na" | cut -d " " -f 1
na

sed

sed是一种流编辑器，它一次处理一行内容。处理时，把当前处理的行存储在临时缓冲区中，称为“模式空间”，接着用sed命令处理缓冲区中的内容，处理完成后，把缓冲区的内容送往屏幕。接着处理下一行，这样不断重复，直到文件末尾。文件内容并没有改变，除非你使用重定向存储输出。

基本用法

sed [选项参数] ‘command’ filename
选项参数：
-e 直接在指令列模式上进行sed的动作编辑；
命令功能描述
a 新增，a的后面可以接字串，在下一行出现；
d 删除；
s 查找并替换 ；

例子

[mubai@localhost test]$ touch sed.txt
[mubai@localhost test]$ vim sed.txt
hang nan
zhou jing
wo  wo
lai  lai

le  le

#将“mei nv”这个单词插入到sed.txt第二行下，打印。
[mubai@localhost test]$ sed '2a mei nv' sed.txt 
hang nan
zhou jing
mei nv
wo  wo
lai  lai

le  le
[mubai@localhost test]$ cat sed.txt 
hang nan
zhou jing
wo  wo
lai  lai

le  le
#注意：文件并没有改变

#删除sed.txt文件所有包含wo的行
[mubai@localhost test]$ sed '/wo/d' sed.txt
hang nan
zhou jing
lai  lai

le  le

#将sed.txt文件中wo替换为ni
[mubai@localhost test]$ sed 's/wo/ni/g' sed.txt 
hang nan
zhou jing
ni  ni
lai  lai

le  le
#注意：‘g’表示global，全部替换

#将sed.txt文件中的第二行删除并将wo替换为ni
[mubai@localhost test]$ sed -e '2d' -e 's/wo/ni/g' sed.txt 
hang nan
ni  ni
lai  lai

le  le

awk

一个强大的文本分析工具，把文件逐行的读入，以空格为默认分隔符将每行切片，切开的部分再进行分析处理。

基本用法

awk [选项参数] ‘pattern1{action1} pattern2{action2}…’ filename
pattern：表示AWK在数据中查找的内容，就是匹配模式
action：在找到匹配内容时所执行的一系列命令
选项参数：
-F 指定输入文件折分隔符
-v 赋值一个用户定义变量

例子

[mubai@localhost test]$ sudo cp /etc/passwd ./
#搜索passwd文件以root关键字开头的所有行，并输出该行的第7列。
[mubai@localhost test]$ awk -F: '/^root/{print $7}' passwd 
/bin/bash
#搜索passwd文件以root关键字开头的所有行，并输出该行的第1列和第7列，中间以“，”号分割。
[mubai@localhost test]$ awk -F: '/^root/{print $1","$7}' passwd 
root,/bin/bash

sort

sort命令是在Linux里非常有用，它将文件进行排序，并将排序结果标准输出

基本用法

sort(选项)(参数)
选项说明：
-n 依照数值的大小排序
-r 以相反的顺序来排序
-t 设置排序时所用的分隔字符
-k 指定需要排序的列
参数：指定待排序的文件列表

例子

[root@mail text]# cat sort.txt
aaa:10:1.1
ccc:30:3.3
ddd:40:4.4
bbb:20:2.2
eee:50:5.5
eee:50:5.5

[root@mail text]# sort sort.txt
aaa:10:1.1
bbb:20:2.2
ccc:30:3.3
ddd:40:4.4
eee:50:5.5
eee:50:5.5

#忽略相同行使用-u选项或者uniq：
[root@mail text]# cat sort.txt
aaa:10:1.1
ccc:30:3.3
ddd:40:4.4
bbb:20:2.2
eee:50:5.5
eee:50:5.5

[root@mail text]# sort -u sort.txt
aaa:10:1.1
bbb:20:2.2
ccc:30:3.3
ddd:40:4.4
eee:50:5.5

或者

[root@mail text]# uniq sort.txt
aaa:10:1.1
ccc:30:3.3
ddd:40:4.4
bbb:20:2.2
eee:50:5.5


# sort的-n、-r、-k、-t选项的使用：
[root@mail text]# cat sort.txt
AAA:BB:CC
aaa:30:1.6
ccc:50:3.3
ddd:20:4.2
bbb:10:2.5
eee:40:5.4
eee:60:5.1

#将BB列按照数字从小到大顺序排列：
[root@mail text]# sort -nk 2 -t: sort.txt
AAA:BB:CC
bbb:10:2.5
ddd:20:4.2
aaa:30:1.6
eee:40:5.4
ccc:50:3.3
eee:60:5.1

#将CC列数字从大到小顺序排列：
[root@mail text]# sort -nrk 3 -t: sort.txt
eee:40:5.4
eee:60:5.1
ddd:20:4.2
ccc:50:3.3
bbb:10:2.5
aaa:30:1.6
AAA:BB:CC

# -n是按照数字大小排序，-r是以相反顺序，-k是指定需要爱排序的栏位，-t指定栏位分隔符为冒号

$ sort -t ' ' -k 1.2 facebook.txt
baidu 100 5000
sohu 100 4500
google 110 5000
guge 50 3000

#使用了-k 1.2，表示对第一个域的第二个字符开始到本域的最后一个字符为止的字符串进行排序。你会发现baidu因为第二个字母是a而名列榜首。sohu和 google第二个字符都是o，但sohu的h在google的o前面，所以两者分别排在第二和第三。guge只能屈居第四了。