SHELL----cut、sort、uniq、test、sed、awk用法详介

一、cut 命令

    -d   指定分隔符为：显示1-3列： cut -d : -f 1-3 /etc/passwd
    -c   显示第一和第四个字符： -cut -c 1,4 /etc/passwd
    -f     列

cut练习1：获取主机ip:

方法一：ifconfig eth0 | grep "inet " | cut -d " " -f 10

ifconfig eth0 | grep "inet " | cut -d " " -f 10
过程分步：
1.[root@server6 ~]# ifconfig eth0
eth0: flags=4163<UP,BROADCAST,RUNNING,MULTICAST>  mtu 1500
        inet 172.25.17.6  netmask 255.255.255.0  broadcast 172.25.17.255
        inet6 fe80::5054:ff:fef8:b5f9  prefixlen 64  scopeid 0x20<link>
        ether 52:54:00:f8:b5:f9  txqueuelen 1000  (Ethernet)
        RX packets 81  bytes 9141 (8.9 KiB)
        RX errors 0  dropped 0  overruns 0  frame 0
        TX packets 190  bytes 13695 (13.3 KiB)
        TX errors 0  dropped 0 overruns 0  carrier 0  collisions 0



2.[root@server6 ~]# ifconfig eth0 | grep "inet"
        inet 172.25.17.6  netmask 255.255.255.0  broadcast 172.25.17.255
        inet6 fe80::5054:ff:fef8:b5f9  prefixlen 64  scopeid 0x20<link>
[root@server6 ~]# ifconfig eth0 | grep "inet "
        inet 172.25.17.6  netmask 255.255.255.0  broadcast 172.25.17.255


3.[root@server6 ~]# ifconfig eth0 | grep "inet "|cut -d " " -f 10
172.25.17.6

方法二：ifconfig eth0 | grep "inet " |  awk '{print $2}'

[root@server6 ~]# ifconfig eth0 | grep "inet "|awk '{print $2}'
172.25.17.6

练习2：检测网络

 ping -c1 -w1 172.25.254.$1 &> /dev/null && echo 172.25.254.$1 is up || echo 172.25.254.$1 is down

练习3：查看cpu前五进程

[root@localhost Desktop]# ps -ax -o %cpu,pid --sort=-%cpu | grep -v PID | head -n 5
 0.0     1
 0.0     2
 0.0     3
 0.0     5
 0.0     7

 

 

二、sort 命令

sort -n  纯数字排序
     -r  倒叙
     -u  去掉重复数字
     -o  输出到指定文件中
     -t 指定分隔符
     -k 指定要排序的列

【默认排序以第一个数字大小进行排序】

[root@server ~]# sort westos 

1
12
123
2
3
32
5
51
6
7

sort -n  纯数字排序

[root@server ~]# sort -n westos 

1
2
3
5
6
7
12
32
51
123

 

sort -t : -k 2 westos   #指定以冒号为分隔符，对第二列排序

[root@server ~]# sort -t : -k 2 westos 
2:0
12:10
2:12
3:2
51:20
5:21
123:22
32:31
5:4
6:4
1:5
51:55
123:66
7:79

 

三、uniq命令---对重复字符处理

uniq
    -u 显示唯一的行
    -d 显示重复的行
    -c 每行显示一次并统计重复次数

 sort -n westos | uniq -d    #先对westos进行排序，再显示重复的行

[root@server ~]# sort -n westos | uniq -d
2
10
31

sort -n westos | uniq -u   #先对westos进行排序，再显示唯一的行

[root@server ~]# sort -n westos | uniq -u
0
1
4
6
9
20
22
55

 

[root@localhost Desktop]# sort -n 2.sh | uniq -u -c
      1 5
      1 7
      1 8
      1 33
      1 34
      1 45
      1 65
      1 67

 

练习：导出 /tmp下最大的文件，并输出文件名

方法一：

[root@localhost kiosk]# ls -Sl /tmp/ | head -2 | cut -d " " -f 13

yum_save_tx.2019-04-04.21-50.QDEKFf.yumtx

 

方法二：

[root@localhost kiosk]# ls -Sl /tmp/ |head -2 |awk '{print $9}'

yum_save_tx.2019-04-04.21-50.QDEKFf.yumtx

 

四、test命令

 

test 1==2   等同于  [ 1 == 2 ]   等同于  [ 1 - eq 2]

test "$a" == "$b" 等同于 [ "a" == "$b" ]
[ "$a" = "$b" ]      等于
[ "$a" ！= "$b" ]    不等于
[ "$a" - eq "$b" ]   "等于
[ "$a" - ne "$b" ]   不等于
[ "$a" - le "$b" ]   小于等于
[ "$a" - ge "$b" ]   大于等于
[ "$a" - gt "$b" ]   大于
[ "$a" - lt "$b" ]   小于
[ "$a" - ne "$b" -a "$a" -gt "$b" ] -a必须条件都满足
[ "$a" - ne "$b" -o "$a" -gt "$b" ]  -a条件至少满足一个
[ -z "$a" ]     是否为空
[ -e "file" ]   是否存在
[ -f "file" ]   普通文件
[ -b "file" ]   块设备
[ -S "file" ]   套接字
[ -c "file" ]   字符设备
[ -L "file" ]   软连接

练习:用户输入一个数，是否在10以内

思路：1.判断是否为空
2.是否在10以内
3，1<$a<10 -- > yes
4.$a>10 ---- > no

#判断输入的数字是否在10以内
#1.输入是否为空
#2.是否在10以内
#3.1<$a<10 --> yes
#4.$a<1 $a>10 --> no


#!/bin/bash

[ -z "$1" ] && {
    echo "please input a number!"
    exit 1
}

[ "$1" -gt "0" -a "$1" -lt "10" ] && {
    echo "YES"
}||{
    echo "NO"
}

 

五、sed命令---stream editor :一次处理一行内容，处理时，把当前的行存储在临时缓冲区，处理完后，输送到屏幕

sed [参数] '命令' file
    p    ##显示
    d    ##删除
    a    ##添加
    c    ##替换
    i    ##插入

1）   p:显示

sed -n '/^#/p' /etc/fstab    显示以#开头
sed -n '/\:/p' /etc/fstab    有冒号的行,冒号需要转义
sed -n '/\:/！p' /etc/fstab  没有冒号的行,冒号需要转义
sed -n '2,6p                 显示2-6行
sed -n '2,6！p               不显示2-6行
sed 's/\//#/g' /etc/fstab    将/etc/fstab中的所有/换为# /需要转义
（注意：不加-i 只展示出效果，真正文件并不替换）

2）  d：删除

删除以UID 开头的：sed '/^UUID/d' /etc/fstab
删除空行：sed '/^$/d' /etc/fstab 
删除指定行：   sed '1,4d' /etc/fstab 

3）a:添加

换行：sed '/hello/aworld' westos
不换行：sed 's/hello/hello world/g' westos
换行：sed 's/hello/hello\nworld/g' westo

4）c:替换

sed '/hello/chello world' westos
（不加-i 只展示出效果，真正文件并不替换）

5）i 插入：

sed -i 's/\//#/g' /etc/fstab    将/etc/fstab中的所有/换为# /需要转义
（不加-i 只展示出效果，真正文件并不替换）

#s/表示开头
#/g表示全局

 

 

六、awk命令;

awk处理机制：一行一行的读，根据模式一次从文件中抽取i一行文本，对这行文本进行切片，默认使用空白字符作为分隔符

awk '{print FILENAME,NR}' /etc/passwd 输出文件名以及行号
awk -F: '{print NR,NF}' /etc/passwd  输出每次处理的行号以及当前以冒号为分隔符的字段个数

 

[root@server mnt]# cat test
this | is | a | file
 $1    $2   $3   $4

awk '{print $1}' test
this
awk '{print $4}' test
file
awk '{print $1,$2}' test  显示两个
this is

0代表一整行

 

BEGIN {}读入第一行文本之前执行的语句，一般用来初始化操作
{}:逐行处理
END{} 处理完最后一行文本后执行，一般用来处理输出结果

awk 'BEGIN { a=34;print a+10 }'

第一行之前加REDHAT 末尾加WESTOS  打印行号和内容，以冒号为分隔符：

awk -F: 'BEGIN{print "REDHAT"} {print NR;print } END {print "WESTOS"}' passwd 

1）输出以bash结尾的：

输出以bash结尾的：
awk -F: '/bash$/{print}' /etc/passwd
root:x:0:0:root:/root:/bin/bash
student:x:1000:1000:Student User:/home/student:/bin/bash

2）：输出第三行：

awk -F: 'NR==3 {print}' /etc/passwd

3）：输出偶数行：

awk -F: 'NR % 2 == 0 {print}' /etc/passwd

4）：输出前三行：

awk -F: 'NR <= 3 {print}' /etc/passwd
root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin

练习1：找出/etc/passwd系统中uid<2用户的uid以及用户名 打印

[root@localhost kiosk]# awk -F: '$3 < 2 {print $1,$3}' /etc/passwd
root 0
bin 1

练习2：统计文本总字段个数：

[root@localhost kiosk]# awk 'BEGIN{i=0}{i+=NF}END{print i}' test.txt
5
[root@localhost kiosk]# cat test.txt 
ABSD XX
XX
ABSDABCD XX

练习3：列出文件的3-5行；

awk -F: 'NR >=3 && NR <=5 {print }' /etc/passwd