shell的一些工具语法

cut

1）基本用法
cut [选项参数] filename
2）选项参数说明
选项参数 功能
-f 列号，提取第几列
-d 分隔符，按照指定分隔符分割列（默认分隔符是制表符）
3）案例实操
（1）数据准备

[root@hadoop101 datas]$ touch cut.txt
[root@hadoop101 datas]$ vim cut.txt
dong shen
guan zhen
wo  wo
lai  lai
le  le

（2）切割cut.txt第一列

[root@hadoop101 datas]$ cut -d " " -f 1 cut.txt 
dong
guan
wo
lai
le

（3）切割cut.txt第二、三列

[root@hadoop101 datas]$ cut -d " " -f 2,3 cut.txt 
shen
zhen
wo
lai
le

（4）在cut.txt文件中切割出guan

[root@hadoop101 datas]$ cat cut.txt | grep "guan" | cut -d " " -f 1
guan

awk

1）基本用法
awk [选项参数] ‘pattern1{action1} pattern2{action2}…’ filename
pattern：表示AWK在数据中查找的内容，就是匹配模式
action：在找到匹配内容时所执行的一系列命令
2）选项参数说明
选项参数 功能
-F 指定输入文件拆分隔符
-v 赋值一个用户定义变量
3）案例实操
（1）数据准备

[root@hadoop101 datas]$ cp /etc/passwd ./

（2）搜索passwd文件以root关键字开头的所有行，并输出该行的第7列（文件按照“：”切分）。

[root@hadoop101 datas]$ awk -F ":" '/^root/{print $7}' passwd 
/bin/bash

（3）搜索passwd文件以root关键字开头的所有行，并输出该行的第1列和第7列，中间以“，”号分割。

[root@hadoop101 datas]$ awk -F ":" '/^root/{print $1","$7}' passwd 
root,/bin/bash

（4）只显示/etc/passwd的第一列和第七列（文件按照“：”切分），以逗号分割，且在第一行前面添加列名user，shell在最后一行添加"dahaige，/bin/zuishuai"。

[root@hadoop101 datas]$ awk -F : 'BEGIN{print "user, shell"} {print $1","$7} END{print "dahaige,/bin/zuishuai"}' passwd
user, shell
root,/bin/bash
bin,/sbin/nologin
。。。
atguigu,/bin/bash
dahaige,/bin/zuishuai

注意：BEGIN 在所有数据读取行之前执行；END 在所有数据执行之后执行。

（5）将passwd文件中的用户id增加数值1并输出

[root@hadoop101 datas]$ awk -v i=1 -F: '{print $3+i}' passwd
1
2
3
4

4）awk的内置变量
变量 说明
FILENME 文件名
NR 已读的记录数(可以表示行数)
NF 浏览记录的域的个数（切割后，列的个数）

5）案例实操

（1）统计passwd文件名，每行的行号，每行的列数

[root@hadoop101 datas]$ awk -F ":" '{print "filename:"  FILENAME ", linenumber:" NR  ",columns:" NF}' passwd 
filename:passwd, linenumber:1,columns:7
filename:passwd, linenumber:2,columns:7
filename:passwd, linenumber:3,columns:7

（2）切割IP

[root@hadoop101 datas]$ ifconfig | grep "netmask" | awk -F "inet" 
'{print $2}' | awk -F " " '{print $1}'

（3）查询某个文件中空行所在的行号

[root@hadoop101 datas]$ awk '/^$/{print NR}' sed.txt 
5

sort

1）基本语法
sort(选项)(参数)
选项 说明
-n 依照数值的大小排序
-r 以相反的顺序来排序
-t 设置排序时所用的分隔字符
-k 指定需要排序的列
参数：指定待排序的文件列表
2）案例实操
（1）数据准备

[root@hadoop101 datas]$ touch sort.sh
[root@hadoop101 datas]$ vim sort.sh 
bb:40:5.4
bd:20:4.2
xz:50:2.3
cls:10:3.5
ss:30:1.6

（2）按照“：”分割后的第三列倒序排序。

[root@hadoop101 datas]$ sort -t : -nrk 3  sort.sh 
bb:40:5.4
bd:20:4.2
cls:10:3.5
xz:50:2.3
ss:30:1.6

wc

1）基本语法
wc [选项参数] filename

选项参数 功能
-l 统计文件行数
-w 统计文件的单词数
-m 统计文件的字符数
-c 统计文件的字节数
2）案例实操
统计/etc/profile文件的行数、单词数、字节数！

[root@hadoop101 datas]# wc -w /etc/profile 
[root@hadoop101 datas]# wc -l /etc/profile 
[root@hadoop101 datas]# wc -m /etc/profile