Shell
1.简介
Shell是一个命令行解释器,它接收应用程序/用户命令,然后调用操作系统内核。
Shell是一个非常强大的编程语言,易编写,易调试,灵活性强。
# 查看Shell解释器
[root@localhost ~]# cat /etc/shells
/bin/sh
/bin/bash
/usr/bin/sh
/usr/bin/bash
# bash和sh的关系
[root@localhost bin]# ll | grep bash
-rwxr-xr-x. 1 root root 964608 Oct 30 2018 bash
lrwxrwxrwx. 1 root root 10 May 11 2021 bashbug -> bashbug-64
-rwxr-xr-x. 1 root root 6964 Oct 30 2018 bashbug-64
lrwxrwxrwx. 1 root root 4 May 11 2021 sh -> bash
# 从上面可以看出来sh是一个软连接 连接到bash
# Centos默认的解析器是bash
[root@localhost bin]# echo $SHELL
/bin/bash
2.入门
1.脚本格式
以#!/bin/bash开始(指定解释器)
2.编写helloworld
# 先创建helloworld.sh文件 然后编辑这个文件 写shell命令
[root@localhost ~]# touch hellowold.sh
[root@localhost ~]# vi helloworld.sh
#!/bin/bash
echo "helloworld"
# 这样就好了
# 启动脚本 有两种方式 一种是使用Bash执行这个文件 还有就是自己执行
[root@localhost ~]# sh helloworld.sh
helloworld
[root@localhost ~]# bash helloworld.sh
helloworld
[root@localhost ~]# chmod +x helloworld.sh
[root@localhost ~]# ./helloworld.sh
helloworld
# prefer完美运行
3.变量
1.常用系统变量
# 查看系统变量的值
[root@localhost ~]# echo $PWD
/root
[root@localhost ~]# echo $SHELL
/bin/bash
[root@localhost ~]# echo $USER
root
[root@localhost ~]# echo $HOME
/root
# 显示当前shell中所有的变量
[root@localhost ~]# set
2.自定义变量
2.1语法
(1)定义变量:变量=值
(2)撤销变量:unset 变量
(3)声明静态变量:readonly变量,注意:不能unset
2.2规则
(1)变量名称可以由字母、数字和下划线组成,但是不能以数字开头,环境变量名建议大写。
(2)等号两侧不能有空格
(3)在bash中,变量默认类型都是字符串类型,无法直接进行数值运算。
(4)变量的值如果有空格,需要使用双引号或单引号括起来。
[root@localhost ~]# A=2
[root@localhost ~]# echo $A
2
[root@localhost ~]# A=8
[root@localhost ~]# echo $A
8
[root@localhost ~]# unset A
[root@localhost ~]# echo $A
[root@localhost ~]# readonly B=2
[root@localhost ~]# echo $B
2
[root@localhost ~]# B=9
-bash: B: readonly variable
[root@localhost ~]# C=1+2
[root@localhost ~]# echo $C
1+2
[root@localhost ~]# D=I LOVE YOU
-bash: LOVE: command not found
[root@localhost ~]# D="I LOVE YOU"
[root@localhost ~]# echo $D
I LOVE YOU
# 将变量提升为全局变量,其他shell脚本也可使用
[root@localhost ~]# export D
[root@localhost ~]# vi helloworld.sh
#!/bin/bash
echo "helloworld"
echo $D
[root@localhost ~]# bash helloworld.sh
helloworld
I LOVE YOU
3.特殊变量
3.1$n
$n (功能描述:n为数字,$0代表该脚本名称,$1- 9 代 表 第 一 到 第 九 个 参 数 , 十 以 上 的 参 数 , 十 以 上 的 参 数 需 要 用 大 括 号 包 含 , 如 9代表第一到第九个参数,十以上的参数,十以上的参数需要用大括号包含,如 9代表第一到第九个参数,十以上的参数,十以上的参数需要用大括号包含,如{10})
[root@localhost ~]# touch paramter.sh
[root@localhost ~]# vi paramter.sh
#!/bin/bash
echo "$0 $1 $2"
[root@localhost ~]# bash paramter.sh abc def
paramter.sh abc def
3.2$#
$# (功能描述:获取所有输入参数个数,常用于循环)。
[root@localhost ~]# vi paramter.sh
#!/bin/bash
echo "$0 $1 $2"
echo $#
[root@localhost ~]# bash paramter.sh abd def ghi jkl
paramter.sh abd def
4
3.3 ∗ 、 *、 ∗、@
∗ ( 功 能 描 述 : 这 个 变 量 代 表 命 令 行 中 所 有 的 参 数 , * (功能描述:这个变量代表命令行中所有的参数, ∗(功能描述:这个变量代表命令行中所有的参数,*把所有的参数看成一个整体)
@ ( 功 能 描 述 : 这 个 变 量 也 代 表 命 令 行 中 所 有 的 参 数 , 不 过 @ (功能描述:这个变量也代表命令行中所有的参数,不过 @(功能描述:这个变量也代表命令行中所有的参数,不过@把每个参数区分对待)
注意:如果想让 ∗ 和 *和 ∗和@ 体现区别必须用双引号括起来才生效
[root@localhost ~]# vi paramter.sh
#!/bin/bash
echo "$0 $1 $2"
echo $#
echo $*
echo $@
[root@localhost ~]# bash paramter.sh abd def
paramter.sh abd def
2
abd def
abd def
3.4$?
$? (功能描述:最后一次执行的命令的返回状态。如果这个变量的值为0,证明上一个命令正确执行;如果这个变量的值为非0(具体是哪个数,由命令自己来决定),则证明上一个命令执行不正确了。)
# 判断脚本是否正确执行
[root@localhost ~]# bash paramter.sh "abcd" efg
paramter.sh abcd efg
2
abcd efg
abcd efg
[root@localhost ~]# echo $?
0
4.运算符
“ ( ( 运 算 式 ) ) ” 或 “ ((运算式))”或“ ((运算式))”或“[运算式]”
[root@localhost ~]# echo $(((2+3)*4))
20
[root@localhost ~]# echo $[(2+1)*5]
15
[root@localhost ~]# echo $((2+3)*4)
-bash: command substitution: line 1: syntax error near unexpected token `*4'
-bash: command substitution: line 1: `(2+3)*4'
5.条件判断
[ condition ](注意condition前后要有空格)
注意:条件非空即为true,[ atguigu ]返回true,[] 返回false。
(1)两个整数之间比较
== 字符串比较
-lt 小于(less than) -le 小于等于(less equal)
-eq 等于(equal) -gt 大于(greater than)
-ge 大于等于(greater equal) -ne 不等于(Not equal)
(2)按照文件权限进行判断
-r 有读的权限(read) -w 有写的权限(write)
-x 有执行的权限(execute)
(3)按照文件类型进行判断
-f 文件存在并且是一个常规的文件(file)
-e 文件存在(existence) -d 文件存在并是一个目录(directory)
[root@localhost ~]# [ 23 -eq 22 ]
[root@localhost ~]# echo $?
1
[root@localhost ~]# [ -w helloworld.sh ]
[root@localhost ~]# echo $?
0
(4)多条件判断(&& 表示前一条命令执行成功时,才执行后一条命令,|| 表示上一条命令执行失败后,才执行下一条命令)
[root@localhost ~]# [ condition ] && echo OK || echo notok
OK
[root@localhost ~]# [ condition ] && [ ] || echo notok
notok
6.流程控制
1.if
if [ 条件判断式 ]
then
程序
fi
或者
if [ 条件判断式 ]
then
程序
elif [ 条件判断式 ]
then
程序
else
程序
fi
注意事项:
(1)[ 条件判断式 ],中括号和条件判断式之间必须有空格
(2)if后要有空格
[root@localhost ~]# touch if.sh
[root@localhost ~]# vi if.sh
#!/bin/bash
if [ $1 -eq "1" ]
then
echo "I am 1"
elif [ $1 -eq "2" ]
then
echo "I am 2"
fi
[root@localhost ~]# bash if.sh 1
I am 1
[root@localhost ~]# bash if.sh 2
I am 2
[root@localhost ~]# bash if.sh 3
2.case
case $变量名 in
“值1”)
如果变量的值等于值1,则执行程序1
;;
“值2”)
如果变量的值等于值2,则执行程序2
;;
…省略其他分支…
*)
如果变量的值都不是以上的值,则执行此程序
;;
esac
注意事项:
(1)case行尾必须为单词“in”,每一个模式匹配必须以右括号“)”结束。
(2)双分号“****;;****”表示命令序列结束,相当于java中的break。
(3)最后的“*)”表示默认模式,相当于java中的default。
[root@localhost ~]# touch case.sh
[root@localhost ~]# vi case.sh
#!/bin/bash
case $1 in
"1")
echo "I am 1"
;;
"2")
echo "I am 2"
;;
*)
echo "I am else"
;;
esac
[root@localhost ~]# bash case.sh 1
I am 1
[root@localhost ~]# bash case.sh 2
I am 2
[root@localhost ~]# bash case.sh 3
I am else
3.for
for (( 初始值;循环控制条件;变量变化 ))
do
程序
done
# 计算从1加到100的值
[root@localhost ~]# touch for1.sh
[root@localhost ~]# vi for1.sh
#!/bin/bash
s=0
for((i=0;i<=100;i++))
do
s=$[$s+$i]
done
echo $s
[root@localhost ~]# bash for1.sh
5050
for 变量 in 值1 值2 值3…
do
程序
done
[root@localhost ~]# vi for1.sh
[root@localhost ~]# touch for2.sh
#!/bin/bash
for i in $*
do
echo "I LOVE $i"
done
[root@localhost ~]# bash for2.sh 1 2 3 4 5 6
I LOVE 1
I LOVE 2
I LOVE 3
I LOVE 4
I LOVE 5
I LOVE 6
比较 ∗ 和 *和 ∗和@区别
和
和
和@都表示传递给函数或脚本的所有参数,不被双引号“”包含时,都以$1
2
…
2 …
2…n的形式输出所有参数。
当它们被双引号“”包含时,“$”会将所有的参数作为一个整体,以“$1
2
…
2 …
2…n”的形式输出所有参数;“$@”会将各个参数分开,以“$1” “
2
”
…
”
2”…”
2”…”n”的形式输出所有参数。
[root@localhost ~]# vi for2.sh
#!/bin/bash
for i in $*
do
echo "I LOVE $i"
done
echo "华丽的分割线------"
for i in "$*"
do
echo "I LOVE $i"
done
echo "华丽的分割线------"
for i in "$@"
do
echo "I LOVE $i"
done
[root@localhost ~]# bash for2.sh 1 2 3 4 5 6
I LOVE 1
I LOVE 2
I LOVE 3
I LOVE 4
I LOVE 5
I LOVE 6
华丽的分割线------
I LOVE 1 2 3 4 5 6
华丽的分割线------
I LOVE 1
I LOVE 2
I LOVE 3
I LOVE 4
I LOVE 5
I LOVE 6
# 总结
#$*中的所有参数看成是一个整体,所以这个for循环只会循环一次
#$@中的每个参数都看成是独立的,所以“$@”中有几个参数,就会循环几次
4.while
while [ 条件判断式 ]
do
程序
done
[root@localhost ~]# touch while.sh
[root@localhost ~]# vi while.sh
#!/bin/bash
s=0
i=0
while [ $i -le 100 ]
do
s=$[$s+$i]
i=$[$i+1]
done
echo $s
[root@localhost ~]# bash while.sh
5050
7.read
read(选项)(参数)
选项:
-p:指定读取值时的提示符;
-t:指定读取值时等待的时间(秒)。
参数
变量:指定读取值的变量名
# 7秒,读取控制台输入的内容
[root@localhost ~]# touch read.sh
[root@localhost ~]# vi read.sh
#!/bin/bash
read -t 7 -p "Enter you name in 7 seconds " NAME
echo $NAME
[root@localhost ~]# bash read.sh
Enter you name in 7 seconds abcdef
[root@localhost ~]# bash read.sh
Enter you name in 7 seconds abc
abc
8.函数
1.basename
basename [string / pathname] [suffix] (功能描述:basename命令会删掉所有的前缀包括最后一个(‘/’)字符,然后将字符串显示出来。
选项:
suffix为后缀,如果suffix被指定了,basename会将pathname或string中的suffix去掉。
# 截取/home/tkz/abc.txt的文件名
[root@localhost ~]# basename /home/tkz/abc.txt
abc.txt
[root@localhost ~]# basename /home/tkz/abc.txt .txt
abc
2.dirname
dirname 文件绝对路径 (功能描述:从给定的包含绝对路径的文件名中去除文件名(非目录的部分),然后返回剩下的路径(目录的部分))
[root@localhost ~]# dirname /home/tkz/abc.txt
/home/tkz
3.自定义函数
#定义函数
[ function ] funname[()]
{
Action;
[return int;]
}
#调用函数
funname
(1)必须在调用函数地方之前,先声明函数,shell脚本是逐行运行。不会像其它语言一样先编译。
(2)函数返回值,只能通过$?系统变量获得,可以显示加:return返回,如果不加,将以最后一条命令运行结果,作为返回值。return后跟数值n(0-255)
# 计算两个输入参数的乘积
[root@localhost ~]# touch function.sh
[root@localhost ~]# vu function.sh
#!/bin/bash
function cheng()
{
s=0
s=$[ $1 * $2 ]
echo "$s"
}
read -p "Please input the number1:" n1;
read -p "Please input the number2:" n2
cheng $n1 $n2
[root@localhost ~]# bash function.sh
Please input the number1:2
Please input the number2:3
6
9.shell工具
1.cut
cut的工作就是“剪”,具体的说就是在文件中负责剪切数据用的。cut 命令从文件的每一行剪切字节、字符和字段并将这些字节、字符和字段输出。
cut [选项参数] filename
说明:默认分隔符是制表符
选项参数 | 功能 |
---|---|
-f | 列号,提取第几列 |
-d | 分隔符,按照指定分隔符分割列 |
-c | 指定具体的字符 |
[root@localhost ~]# touch cut.txt
[root@localhost ~]# vi cut.txt
dong shen
guan zhen
wo wo
lai lai
le le
[root@localhost ~]# cut -f 1 cut.txt
dong
guan
wo
lai
le
[root@localhost ~]# cut -f 2 cut.txt
shen
zhen
wo
lai
le
2.wak
一个强大的文本分析工具,把文件逐行的读入,以空格为默认分隔符将每行切片,切开的部分再进行分析处理。
awk [选项参数] ‘pattern1{action1} pattern2{action2}…’ filename
pattern:表示AWK在数据中查找的内容,就是匹配模式
action:在找到匹配内容时所执行的一系列命令
选项参数 | 功能 |
---|---|
-F | 指定输入文件折分隔符 |
-v | 赋值一个用户定义变量 |
# 准备文件
[root@localhost ~]# cp /etc/passwd ./
# 搜索passwd文件以root关键字开头的所有行,并输出该行的第7列。
[root@localhost ~]# awk -F: '/^root/{print $7}' passwd
/bin/bash
# 搜索passwd文件以root关键字开头的所有行,并输出该行的第1列和第7列,中间以“,”号分割。
[root@localhost ~]# awk -F: '/^root/{print $1","$7}' passwd
root,/bin/bash
# 注意:只有匹配了pattern的行才会执行action
# 只显示/etc/passwd的第一列和第七列,以逗号分割,且在所有行前面添加列名user,shell在最后一行添加"dahaige,/bin/zuishuai"。
[root@localhost ~]# awk -F : 'BEGIN{print "user, shell"} {print $1","$7} END{print "dahaige,/bin/zuishuai"}' passwd
user, shell
root,/bin/bash
bin,/sbin/nologin
daemon,/sbin/nologin
adm,/sbin/nologin
lp,/sbin/nologin
sync,/bin/sync
shutdown,/sbin/shutdown
halt,/sbin/halt
mail,/sbin/nologin
operator,/sbin/nologin
games,/sbin/nologin
ftp,/sbin/nologin
nobody,/sbin/nologin
systemd-network,/sbin/nologin
dbus,/sbin/nologin
polkitd,/sbin/nologin
sshd,/sbin/nologin
postfix,/sbin/nologin
chrony,/sbin/nologin
mysql,/sbin/nologin
dahaige,/bin/zuishuai
# 注意:BEGIN 在所有数据读取行之前执行;END 在所有数据执行之后执行。
# 将passwd文件中的用户id增加数值1并输出
[root@localhost ~]# awk -v i=1 -F: '{print $3+i}' passwd
1
2
3
4
5
6
7
8
9
12
13
15
100
193
82
1000
75
90
999
wak的内置变量
变量 | 说明 |
---|---|
FILENAME | 文件名 |
NR | 已读的记录数(行数) |
NF | 浏览记录的域的个数(切割后,列的个数) |
# 统计passwd文件名,每行的行号,每行的列数
[root@localhost ~]# awk -F: '{print "filename:" FILENAME ", linenumber:" NR ",columns:" NF}' passwd
filename:passwd, linenumber:1,columns:7
filename:passwd, linenumber:2,columns:7
filename:passwd, linenumber:3,columns:7
filename:passwd, linenumber:4,columns:7
filename:passwd, linenumber:5,columns:7
filename:passwd, linenumber:6,columns:7
filename:passwd, linenumber:7,columns:7
filename:passwd, linenumber:8,columns:7
filename:passwd, linenumber:9,columns:7
filename:passwd, linenumber:10,columns:7
filename:passwd, linenumber:11,columns:7
filename:passwd, linenumber:12,columns:7
filename:passwd, linenumber:13,columns:7
filename:passwd, linenumber:14,columns:7
filename:passwd, linenumber:15,columns:7
filename:passwd, linenumber:16,columns:7
filename:passwd, linenumber:17,columns:7
filename:passwd, linenumber:18,columns:7
filename:passwd, linenumber:19,columns:7
filename:passwd, linenumber:20,columns:7
# 切割Ip
[root@localhost ~]# ifconfig eth0 | grep "inet addr" | awk -F: '{print $2}' | awk -F " " '{print $1}'
192.168.1.102
# 查询cut.txt中空行所在的行号
[root@localhost ~]# awk '/^$/{print NR}' cut.txt
5
3.sort
sort命令是在Linux里非常有用,它将文件进行排序,并将排序结果标准输出。
sort(选项)(参数)
选项 | 说明 |
---|---|
-n | 依照数值的大小排序 |
-r | 以相反的顺序来排序 |
-t | 设置排序时所用的分隔字符 |
-k | 指定需要排序的列 |
参数:指定待排序的文件列表
# 文件准备
[root@localhost ~]# touch sort.sh
[root@localhost ~]# vi sort.sh
bb:40:5.4
bd:20:4.2
xz:50:2.3
cls:10:3.5
ss:30:1.6
# 按照“:”分割后的第三列倒序排序。
10、正则表达式
正则表达式使用单个字符串来描述、匹配一系列符合某个句法规则的字符串。在很多文本编辑器里,正则表达式通常被用来检索、替换那些符合某个模式的文本。在Linux中,grep,sed,awk等命令都支持通过正则表达式进行模式匹配。
1.常规匹配
# 一串不包含特殊字符的正则表达式匹配它自己,例如:
[root@localhost ~]# cat passwd | grep root
root:x:0:0:root:/root:/bin/bash
operator:x:11:0:operator:/root:/sbin/nologin
# 就会匹配所有包含root的行
2.常用特殊字符
2.1^
^ 匹配一行的开头
# 匹配出所有以a开头的行
[root@localhost ~]# cat passwd | grep ^a
adm:x:3:4:adm:/var/adm:/sbin/nologin
2.2$
$ 匹配一行的结束
# 匹配出所有以t结尾的行
[root@localhost ~]# cat passwd | grep t$
halt:x:7:0:halt:/sbin:/sbin/halt
2.3.
. 匹配一个任意的字符
[root@localhost ~]# cat passwd | grep r..t
root:x:0:0:root:/root:/bin/bash
operator:x:11:0:operator:/root:/sbin/nologin
ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
2.4*
* 不单独使用,他和左边第一个字符连用,表示匹配上一个字符0次或多次
[root@localhost ~]# cat passwd | grep ro*t
root:x:0:0:root:/root:/bin/bash
operator:x:11:0:operator:/root:/sbin/nologin
2.5[]
[ ] 表示匹配某个范围内的一个字符,例如
[6,8]------匹配6或者8
[a-z]------匹配一个a-z之间的字符
[a-z]*-----匹配任意字母字符串
[a-c, e-f]-匹配a-c或者e-f之间的任意字符
[root@localhost ~]# cat passwd | grep r[a,b,c]t
operator:x:11:0:operator:/root:/sbin/nologin
sshd:x:74:74:Privilege-separated SSH:/var/empty/sshd:/sbin/nologin
2.6\
\ 表示转义,并不会单独使用。由于所有特殊字符都有其特定匹配模式,当我们想匹配某一特殊字符本身时(例如,我想找出所有包含 ‘$’ 的行),就会碰到困难。此时我们就要将转义字符和特殊字符连用,来表示特殊字符本身,例如
[root@localhost ~]# cat passwd | grep a$b
就会匹配所有包含 a$b 的行。
注意:直接匹配 $ 字符,需要进行转义并且加上单引号
3.其他特殊字符
查询正则表达式语法