目录
1. grep工具
grep是行过滤工具;用于根据关键字进行行过滤
语法:grep [选项] '关键字' 文件名
常用选项:
-i :不区分大小写
-n :显示行号
-v :查找不包含指定内容的行,反向选择
-w :按单词搜索
-o :打印匹配关键字
-c :统计匹配到的次数
-r :逐层遍历目录查找
-A :显示匹配行及后面多少行
-B : 显示匹配行及前面多少行
-C : 显示匹配行前后多少行
-l : 只列出匹配的文件名
-L : 列出不匹配的文件名
-e : 使用正则匹配
-E : 使用扩展正则匹配
^加到关键字前面 : 以关键字开头
$加到关键字后面 : 以关键字结尾
^$ : 匹配空行
--color=auto : 可以将找到的关键词部分加上颜色的显示
2. cut工具
cut是列截取工具,用于列的截取
语法: # cut选项文件名
常见选项:
-c : 以字符为单位进行分割,截取
-d : 自定义分隔符,默认为制表符\t
-f : 与-d一起使用,指定截取哪个区域
cut -d 'i' -f 2 YuZai/love.txt #以i为分隔符将每行第二列数据分割出来
cut -c 2,4 YuZai/love.txt #截取每行的第二列和第四列数据
小工具使用案例
[root@YZ0 ~]# cat YuZai/love.txt
love dian dian
yuzai love dian dian
yuzai
dian
grep '^love' YuZai/love.txt | cut -c 6
效果:过滤love文件中以love开头的其他行,再通过管道符连接后面的命令,截取这一行的第六个字符
3. sort工具
sort工具用于排序;它将文件的每一行作为一个单位,从首字符向后,依次按ASCII码值进行比较,最后将他们按升序输出。
语法 sort 选项 文件名
选项
-u : 去除重复行
-r : 降序排列,默认是升序
-o : 将排序结果输出到文件中,类似重定向符号>
-n : 以数字排序,默认是按字符排序
-t : 分隔符
-k : 第N列
-b : 忽略前导空格。
-R : 随机排序,每次运行的结果均不同
4. uniq工具
uniq用于去除连续的重复行
语法:uniq 选项 文件名
常见选项:
-i : 忽略大小写
-c : 统计重复行次数
-d : 只显示重复行
5. tee工具
tee工具是从标准输入读取并写入到标准输出和文件,即:双向覆盖重定向(屏幕输出|文本输入)
选项:
-a 双向追加重定向
6. diff工具
diff工具用于逐行比较文件的不同
注意: diff描述两个文件不同的方式是告诉我们怎样改变第一个文件之后与第二个文件匹配。
语法: diff [选项] 文件1 文件2
常用选项:
-b 不检查空格
-B 不检查空白行
-i 不检查大小写
-w 忽略所有的空格
--normal 正常格式显示(默认)
-c 上下文格式显示
-u 合并格式显示
7. paste工具
paste工具用于合并文件行
选项:
-d : 自定义间隔符,默认是tab
-s : 串行处理,非并行
8. tr工具
tr用于字符转换,替换和删除;主要用于删除文件中控制字符或进行字符转换
语法:
用法1: # commands | tr 'string1' 'string2'
命令的执行结果交给tr处理,其中string1用于查询,string2用于转换处理
用法2: # tr 'string1' 'string2' < filename
tr处理的内容来自文件,记住要使用"<"标准输入
用法3: # tr options 'string1' < filename
匹配string1进行相应操作,如删除操作
选项:
-d 删除字符串1中所有输入字符。
-s 删除所有重复出现字符序列,只保留第一个;即将重复出现字符串压缩为一个字符串
常匹配字符串:
字符串 含义
a-z或[:lower:] 匹配所有小写字母
A-Z或[:upper:] 匹配所有大写字母
0-9或[:digit:] 匹配所有数字
[:alnum:] 匹配所有字母和数字
[:alpha:] 匹配所有字母
[:blank:] 所有水平空白
[:punct:] 匹配所有标点符号
[:space:] 所有水平或垂直的空格
[:cntrl:] 所有控制字符
备注:\f 走行换页,\n 换行,\r 回车 ,\t tab键
例:
tr 'a-z' 'A-Z' < love.txt
效果:将love文件中的小写字母全部替换为大写字母,打印出来
tr 'a-y' '*' < love.txt
效果:将love文件中的a-y的字母全部替换为*,打印出来
tr -d 'd,l,z' < love.txt
效果:将love文件中的d、l、z输出字符删除,打印出来
tr 'a-z' 'A-Z' < love.txt
效果: 将love文件中的a-z相邻的重复字母进行删减,打印出来
小工具综合使用案例
[root@YZ0 YuZai]# ifconfig
ens33: flags=4163<UP,BROADCAST,RUNNING,MULTICAST> mtu 1500
inet 192.168.187.9 netmask 255.255.255.0 broadcast 192.168.187.255
inet6 fe80::ee8:e39c:817d:ce3f prefixlen 64 scopeid 0x20<link>
ether 00:0c:29:ee:50:4c txqueuelen 1000 (Ethernet)
RX packets 32539 bytes 22833994 (21.7 MiB)
RX errors 0 dropped 0 overruns 0 frame 0
TX packets 8326 bytes 765812 (747.8 KiB)
TX errors 0 dropped 0 overruns 0 carrier 0 collisions 0
lo: flags=73<UP,LOOPBACK,RUNNING> mtu 65536
inet 127.0.0.1 netmask 255.0.0.0
inet6 ::1 prefixlen 128 scopeid 0x10<host>
loop txqueuelen 1000 (Local Loopback)
RX packets 0 bytes 0 (0.0 B)
RX errors 0 dropped 0 overruns 0 frame 0
TX packets 0 bytes 0 (0.0 B)
TX errors 0 dropped 0 overruns 0 carrier 0 collisions 0
要求1:过滤出IP地址
ifconfig | grep -w 'broadcast' | cut -d 't' -f2 | tr -d ' ,a-z,A-Z'
效果: 对ifconfig调出来的文件,进行'broadcast'关键字行过滤,再进行以't'关键字为截取点截取第二列数据,再进行' ,a-z,A-Z'字符的输出删除操作,最后得到相应的纯数字
要求2: 过滤出IP、网关、子网掩码,并将它们排序出来。
ifconfig | grep 'broadcast' | tr -d 'a-z,A,Z' | tr ' ' '\n' | grep -v '^$'
效果: 对ifconfig调出来的文件,进行'broadcast'关键字行过滤,然后进行a-z,A-Z字符的输出删除操作,再将空字符转换为换行字符,最后对空行进行取反过滤出需要的三组数据
9. 通配符
符号 | 意义 |
---|---|
* | 代表0个到无穷多个任意字符 |
? | 代表一定有一任意字符 |
[ ] | 同样代表一定有一个在括号内的字符(非任意字符)。例如 abcd 代表一定有一个字符,可能是 a, b, c, d 这四个任何一个 |
[ ! ] | 对[ ]中的字符取反,与[^]近义 |
[ ^ ] | 若中括号内的第一个字符为指数符号(^),那表示取反,例如^abc表示除了a,b,c之外一定有一个字符 |
{string1,string2,…} | 匹配string1,string2或更多字符串 |
例:
# rm -f file*
# cp *.conf /root
# touch file{1..5}
10. bash中的引号
双引号"" : 会把引号的内容当成整体来看待,允许通过$符号引用其他变量值
单引号'' : 会把引号的内容当成整体来看待,禁止引用其他变量值, shell中特殊符号都被视为普通字符
反撇号`` : 反撇号和$()一样,引号或括号里的命令会优先执行,如果存在嵌套, 反撇号不能用
[root@YZ0 aaa1]# echo "$(date -R)"
Wed, 10 Nov 2021 21:10:31 +0800
[root@YZ0 aaa1]# echo "`date -R`"
Wed, 10 Nov 2021 21:14:25 +0800
11. shell脚本的执行方式
标准执行方式:
前提:shell脚本文件需要有执行权限
①相对路径 :
-rwxr-xr-x. 1 root root 275 11月 11 08:59 first.sh
[root@YZ0 shell01]# pwd
/root/shell01
[root@YZ0 shell01]# ./first.sh
hello YuZai
hello YuZai
hello YuZai
hello YuZai
②绝对路径 :
-rwxr-xr-x. 1 root root 275 11月 11 08:59 first.sh
[root@YZ0 shell01]# pwd
/root/shell01
[root@YZ0 shell01]# /root/shell01/first.sh
hello YuZai
hello YuZai
hello YuZai
hello YuZai
不标准执行方式:
不建议使用
使用场景①:shell脚本没有执行权限,又无法给予权限
使用场景②:查看脚本命令执行情况,排错
非标准执行方法①:直接在命令行指定解释器执行
-x: 一般用于排错,查看脚本的执行过程
-n:用来查看脚本的语法是否有问题
[root@YZ0 shell01]# bash -x first.sh
+ echo 'hello YuZai'
hello YuZai
+ echo 'hello YuZai'
hello YuZai
+ echo 'hello YuZai'
hello YuZai
+ echo 'hello YuZai'
hello YuZai
非标准执行方法②:使用source命令读取脚本文件,重新执行文件中的代码
[root@YZ0 shell01]# source first.sh
hello YuZai
hello YuZai
hello YuZai
hello YuZai
简单的shell脚本
#!/bin/env bash
# 以下内容是对脚本的基本信息的描述
# Name: first1.sh
# Desc: 鱼仔的第二个脚本
# Path: /root/shell01/first1.sh
# Usage: 删除/root/aaa1目录下的所有文件
# 然后在/root目录下创建三个目录,分别为b1-b2-b3
# 拷贝/etc/hosts文件到刚创建的b1目录里
# 最后打印“报告首长,任务已于******时间完成”内容
# Update: 2021-11-11
rm -rf /root/aaa1/*
mkdir /root/b{1..3}
cp /etc/hosts /root/b1
echo "报告首长,任务已于 $(date) 完成"
12. 变量
[root@YZ0 b1]# 定义变量^C
[root@YZ0 b1]# Y="大雅虎"
[root@YZ0 b1]# 调用变量^C
[root@YZ0 b1]# echo $Y
大雅虎
[root@YZ0 b1]# echo ${Y}
大雅虎
[root@YZ0 b1]# 重新赋值给变量^C
[root@YZ0 b1]# Y="是超人吗?"
[root@YZ0 b1]# echo $Y
是超人吗?
[root@YZ0 b1]# 取消变量^C
[root@YZ0 b1]# unset Y
[root@YZ0 b1]# echo $Y
[root@YZ0 b1]#
交互式定义变量(read)
用法1: 用户自己定义变量值
目的:让用户自己给变量赋值,比较灵活
语法:read [选项] 变量名
选项 | 释义 |
---|---|
-p | 定义提示用户的信息 |
-n | 定义字符数(限制变量值的长度) |
-s | 不显示(不显示用户输入的内容) |
-t | 定义超时时间,默认单位为秒(限制用户输入变量值的超时时间) |
[root@YZ0 b1]# read -t 5 -n 4 -s -p "Input your pass: " pass
Input your pass: [root@YZ0 b1]#
[root@YZ0 b1]# echo $pass
1234
用法2: 变量值来自于文件
[root@YZ0 b1]# cat t1.txt
1 2 3 4 5 6 7 o p q r s z
k l o j nm h , j
[root@YZ0 b1]# read -p "Input: " ip < t1.txt
[root@YZ0 b1]# echo $ip
1 2 3 4 5 6 7 o p q r s z
变量名定义规则:
- 变量名区分大小写
- 变量名不能有特殊符号
- 变量名不能以数字开头
- 等号两边不能有任何空格
- 变量名尽量做到见名知意
定义有类型的变量(declare)
目的:给变量做一些限制,固定变量的类型,比如:整型、只读
用法:declare 选项 变量名=变量值
常用选项:
选项 | 释义 |
---|---|
- i | 将变量看成整数 |
- r | 定义只读变量 |
- a | 定义普通数组;查看普通数组 |
- A | 定义关联数组;查看关联数组 |
- x | 将变量通过环境导出 |
-i 举例
[root@YZ0 ~]# declare -i A=78
[root@YZ0 ~]# echo $A
78
[root@YZ0 ~]# A=ppp
[root@YZ0 ~]# echo $A
0
-r 举例
[root@YZ0 ~]# declare -r b=666
[root@YZ0 ~]# echo $b
666
[root@YZ0 ~]# b=999
-bash: b: 只读变量
[root@YZ0 ~]# unset b
-bash: unset: b: 无法反设定: 只读 variable
[root@YZ0 ~]# 此时的变量b无法销毁 只能exit,然后重连 b只在当前终端生效^C
-x举例
[root@YZ0 ~]# declare -x ccc=999
[root@YZ0 ~]# env | grep ccc
ccc=999
[root@YZ0 ~]# echo $ccc
999
13. 变量的分类
1. 本地变量
当前用户自定义的变量。当前进程中有效,其他进程及当前进程的子进程无效。
[root@YZ0 ~]# A=666
[root@YZ0 ~]# echo $A
666
[root@YZ0 ~]# su jack
[jack@YZ0 root]$ echo $A
[jack@YZ0 root]$ exit
exit
[root@YZ0 ~]# ps
PID TTY TIME CMD
1157 pts/0 00:00:00 bash
1331 pts/0 00:00:00 ps
[root@YZ0 ~]# echo $A
666
[root@YZ0 ~]# /bin/bash
[root@YZ0 ~]# ps
PID TTY TIME CMD
1157 pts/0 00:00:00 bash
1332 pts/0 00:00:00 bash
1343 pts/0 00:00:00 ps
[root@YZ0 ~]# echo $A
[root@YZ0 ~]# ps -auxf | grep bash
root 1157 0.0 0.2 115544 2056 pts/0 Ss 08:30 0:00 \_ -bash
root 1332 0.0 0.2 115544 2040 pts/0 S 08:46 0:00 \_ /bin/bash
root 1345 0.0 0.0 112824 972 pts/0 S+ 08:47 0:00 \_ grep --color=auto bash
[root@YZ0 ~]# 变量名=变量值 --本地变量(只针对当前进程生效) ^C
2. 环境变量
当前进程有效,并且能够被子进程调用。
env 查看当前用户的环境变量
set 查询当前用户的所有变量(临时变量与环境变量)
export 变量名
或者 变量名=变量值; export 变量名
效果:
将本地变量(临时变量)变成环境变量
[root@YZ0 ~]# BBB=666
[root@YZ0 ~]# env | grep BBB (局部变量,无结果)
[root@YZ0 ~]# export BBB
[root@YZ0 ~]# env | BBB
bash: BBB: 未找到命令
[root@YZ0 ~]# env | grep BBB
BBB=666
[root@YZ0 ~]# export CCC=999
[root@YZ0 ~]# env | grep CCC
CCC=999
[root@YZ0 ~]# ps
PID TTY TIME CMD
1157 pts/0 00:00:00 bash
1332 pts/0 00:00:00 bash
1355 pts/0 00:00:00 ps
[root@YZ0 ~]# /bin/bash
[root@YZ0 ~]# ps
PID TTY TIME CMD
1157 pts/0 00:00:00 bash
1332 pts/0 00:00:00 bash
1356 pts/0 00:00:00 bash
1367 pts/0 00:00:00 ps
[root@YZ0 ~]# env | grep CCC
CCC=999
4. 全局变量
全局变量:全局所有的用户和程序都能调用,且继承,新建的用户也默认能调用。
相关配置文件
文件名 | 说明 |
---|---|
$HOME/.bashrc | 当前用户的bash信息,用户登录时读取 |
$HOME/.bash_profile | 当前用户的环境变量,用户登录时读取 |
$HOME/.bash_logout | 当前用户退出当前shell时最后读取 |
/etc/bashrc | 全局的bash信息,所有用户都生效 |
/etc/profile | 全局环境变量信息 |
说明:以上文件修改后,都需要重新source让其生效或者退出重新登录。
正常情况下:
/etc/profile
$HOME/.bash_profile
$HOME/.bashrc
/etc/bashrc
$HOME/.bash_logout
4. 系统变量
系统变量(内置bash中变量):shll本身已经固定好了它的名字和作用。