shell编程规范与变量
文章目录
一、Shell脚本概述
1、Shell脚本的概念
- 将要执行的命令按顺序保存到一个文本文件
- 给该文件可执行权限
- 可结合各种Shell控制语句以完成更复杂的操作
2、Shell脚本应用场景
- 重复性操作
- 交互性任务
- 批量事务处理
- 服务运行状态监控
- 定时任务执行
- 自动化完成软件的安装部署,如安装部署LAMP架构服务
自动化完成系统的管理,如批量添加用户
自动化完成备份,如数据库定时备份
自动化的分析处理,如网站访问量
buff/cache
缓存区:复用时资源减少、性能提高
缓冲区:高性能-》低性能,节省高性能方的资源消耗、提高效率
3、Shell的作用
Shell的作用—— 命令解释器,“翻译官”
介于系统内核与用户之间,负责解释命令行
4、shell种类
cat /etc/shell
/bin/sh #是bash命令的软链接 (已经被/bin/bash所替换)
/bin/bash #基准于GNU的框架下发展出的Shell
/usr/bin/sh #已经被bash所替换
/usr/bin/bash #centos和redhat系统默认使用bash shell
/bin/tcsh #csh的增强版,与csh完全兼容 整合了csh,提供更多的功能
/bin/csh #已经被/bin/bash 所替换 (整合C shell,提供更多的功能)
注:nologin:奇怪的shell,这个shell可以让用户无法登录主机。
bash ( /bin/bash)是目前大多数Linux版本采用的默认Shell。
二、规范编写shell脚本
脚本名称一般使用==“.sh”结尾,便于识别
第一行为"#!/bin/bash”==#脚本申明(默认解释器)
表示此行以下的代码语句是通过/bin/bash程序来执行。
还有其他类型的解释器,比如#! /usr/bin/python、 #!/usr/bin/expect
注释信息:以"#"开头的语句表示为注释信息,被注释的语句在脚本运行时不会被执行
可执行语句:如echo命令,用于输出””之间的字符串
1、编写脚本代码
- 使用vim文本编辑器
- 每行一条Linux命令,按执行顺序依次编
2、更完善的脚本构成
- 脚本声明
- 注释信息
- 可执行语句
3、赋予可执行权限
使脚本具有可执行属性
chmod +x 1.sh
4.执行脚本文件
方法一:脚本加执行权限
相对路径执行脚本
./1.sh
绝对路径执行脚本
/opt/1.sh
方法二:不加执行权限 sh+脚本路径(也可使用绝对路径和相对路径)
sh 1.sh
方法三:source+脚本路径
source 1.sh
其它方法:执行脚本的方法除了以上常用的两种方式,还有许多别的方法(可了解)
比如:sh < 1.sh
cat 1.sh | sh
三、重定向与管道操作
1、管道操作
将管道符号“|”左侧的命令输出的结果,作为右侧命令的输入(处理对象),同一行命令中可以使用多个管道
ps aux | wc -lecho "abc123" | passwd --stdin zhangsan
xargs命令 可以通过管道接受字符串,并将接收到的字符串通过空格分割成许多参数(默认情况下是通过空格分割) 然后将参数传递给其后面的命令,作为后面命令的命令行参数
2、重定向
- 标准输入(stdin):从该设备接收用户输入的数据,文件编号为 0,命令将从标准输入文件中读取在执行过程中需要的输入数据
- 标准输出(stdout):通过该设备向用户输出数据,文件编号为 1,命令将执行后的输出结果发送到标准输出文件。
- 标准错误(stderr):通过该设备报告执行出错信息,文件编号为 2,命令将执行期间的各种错误信息发送到标准错误文件。
从键盘接收用户输入的各种命令字串、辅助控制信息,并将命令结果输出到屏幕上;如果命令执行出错,也会将错误信息反馈到屏幕上
fd文件描述符 指向一个位置
echo "123123" | passwd --stdin zhangsan
# | 管道 ; 连接两条指令/命令将前一个命令的结果输出给第二个命令来二次使用
3、重定向输出
交互式硬件设备
重定向操作
1.重定向输出
重定向输出指的是将命令的正常输出结果保存到指定的文件中,而不是直接显示在显示器的屏幕上。
重定向输出使用==“>”或“>>”==操作符号:
1.>意思是当原来文件中有内容的话,原来的内容会被覆盖掉
2.>>意思是当原来文件中有内容的话,新加的内容会追加到里面而不会覆盖原来的内容
错误指令不会有新的信息,bash报错未找到命令,但是会创建文件。
2.重定向输入
重定向输入指的是将命令中接收输入的途径由默认的键盘改为指定的文件,而不是等待从键盘输入。重定向输入使用==“<”==操作符。
通过passwd --stdin 密令,结合管道符,实现免交互密码更改。
echo "123456" > pass.txt
passwd --stdin zhangsan < pass.txt
#从pass.txt文件中取密码,需要注意关闭防火墙,passwd: 鉴定令牌操作错误的报错
--------------
ls -lh > log.txt 2>&1 等同于 ls -lh &> log.txt
本来1-->屏幕 (1指向屏幕)
执行>log后,1-->log.txt (1指向log.txt)
执行2>&1后,2-->1 (2指向1, 而1指向log.txt,因此2也指向了log.txt)
3、错误重定向
错误重定向指的是将执行命令过程中出现的错误信息(如选项或参数错误等)保存到指定的文件,而不是直接显示在屏幕上。错误重定向使用"2>操作符
作用:
在实际应用中,错误重定向可用来收集程序执行的错误信息,为排错提供依据,还可以将无关紧要的错误信息重定向到空文件/dev/null 中,以保持脚本输出的简洁,使用"2>”操作符时,会像使用">"操作符一样覆盖目标文件的内容,若要追加内容而不是覆盖文件,则应改用“2>>“操作符。
&>和>&符号
&表示等同于的意思
例:把正确和错误的消息输入到相同的位置
1>&2 把标准输出重定向到标准错误
2>&1 把标准错误重定向到标准输出
管道符
管道(pipe)操作为不同命令之间的协同工作提供了一种机制,位于管道符号“|”左侧的命令输出的结果,将作为右侧命令的输入(处理对象),同一行命令中可以使用多个管道。
在 Shell 脚本应用中,管道操作通常用来过滤所需要的关键信息。
1.对字符串进行二次过滤
查看gushi.txt文档的内容,且对内容进行二次过滤,找出有关know me 的行
cat gushi.txt grep "know me"
2.查看所有进程的个数:ps -aux | wc -l
3.查看系统IP地址:ifconfig ens33 |grep -w “inet” |awk ‘{print $2}’
4查看所有可登录的用户:cat /etc/passwd | grep "/bin/bash$" | awk -F: '{print $1}'
5.rpm -qc | grep httpd 查看httpd的配置文件位置
6.查看系统内核第四列uname -r | awk -F. '{print $4}'
7.查看第六列磁盘信息df -hT | grep "/$" | awk '{print $6}'
awk
文本和数据进行处理的编程语言
awk 是一种编程语言,用于在linux/unix下对文本和数据进行处理。数据可以来自标准输入(stdin)、一个或多个文件,或其它命令的输出。它支持用户自定义函数和动态正则表达式等先进功能,是linux/unix下的一个强大编程工具。它在命令行中使用,但更多是作为脚本来使用。awk有很多内建的功能,比如数组、函数等,这是它和C语言的相同之处,灵活性是awk最大的优势。
常用命令选项
-F fs fs指定输入分隔符,fs可以是字符串或正则表达式,如-F:
-v var=value 赋值一个用户定义变量,将外部变量传递给awk
-f scripfile 从脚本文件中读取awk命令
-m[fr] val 对val值设置内在限制,-mf选项限制分配给val的最大块数目;-mr选项限制记录的最大数目。这两个功能是Bell实验室版awk的扩展功能,在标准awk中不适用。
四、shell变量的作用、类型
1、变量的作用
-
用来存放系统和用户需要使用的特定参数(值)
-
变量名:使用固定的名称,由系统预设或用户定义
-
变量值:能够根据用户设置、系统环境的变化而变化
2、变量的类型
-
自定义变量:由用户自己定义、修改和使用
-
直接指定变量名称并赋给初始值(内容)即可
-
变量名=变量值(以字母或下划线开头,区分大小写,不能以数字开头;在shell中变量名一般都为大写)------(等号两边没有空格)变量名:临时存放数据的地方,变量名称需以字母或下划线开头,名称中不要包含特殊字符(如+、-、*、/、.、?、%、&、#等)。变量值:临时的可变化的数据。
-
-
特殊变量:环境变量、只读变量、位置变量、预定义变量
-
环境变量: 由系统维护,用于设置工作环境
-
环境变量==指的是出于运行需要而由linux系统提前创建的一类变量,主要用于设置用户的工作环境,包括用户宿主目录、命令查找路径、用户当前目录、登录终端等。
环境变量的值由linux系统自动维护,会随着用户状态的改变而改变。
使用env命令可以查看到当前工作环境下的环境变量,对于常见的一些环境变量应了解其各自的用途。例如,变量USE表示用户名称,HOME表示用户的宿主目录,LANG表示语言和字符集,PWD表示当前所在的工作目录,PATH表示命令搜索路径等、==RANDOM表示随机数,会返回0-32767的整数,==USER表示当前账户的账户名称等,一般都用全大写定义,注意和自定义变量区分
[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-GhizjtSr-1656385025928)(C:\Users\orange\AppData\Roaming\Typora\typora-user-images\image-20220621162357146.png)]
-
-
位置变量: 通过命令行给脚本程序传递参数
- 当执行命令行操作时,第一个字段表示命令名或脚本程序名,其余的字符串参数按照从左到右的顺序依次赋值给位置变量。
位置变量也称为位置参数,使用$1~$9表示
命令或脚本本身的名称使用"$0”表示
- 当执行命令行操作时,第一个字段表示命令名或脚本程序名,其余的字符串参数按照从左到右的顺序依次赋值给位置变量。
-
只读变量:Shell变量中有一种特殊情况,一经设定,其值是不可改变的,这种变量被称为只读变量。在创建变量的时候可将其设置为只读属性,也可以将已存在的变量设置为只读属性,只读变量主要用于变量值不允许被修改的情况,只读变量不可以改变值也不可以被删除。readonly
-
预定义变量: Bash中内置的一类变量,不能直接修改
-
预定义变量使用$"符号和另一个符号组合表示
-
$#:表示命令行中位置参数的个数。 $*:表示所有位置参数的内容,这些内容当做一个整体 $@:表示列出所有位置参数,但是是以单个的形式的列出 $?:表示前一条命令执行后的返回状态,返回值为0表示执行正确,返回任何非0值均表示执行出现异常。 $0:表示当前执行的脚本或程序的名称 $$:表示返回当前进程的进程号 $!:返回最后一个后台进程的进程号 $_:取上次命令最后一个参数
-
-
3、定义一个新的变量
-
变量名以字母或下划线开头,区分大小写,建议全大写
-
变量名=变量值
-
查看变量的值
-
echo $变量名
4、赋值时使用引号
-
双引号∶允许通过$符号引用其他变量值
-
双引号主要起界定字符串的作用,特别是当要赋值的内容中包含空格时,必须以双引号括起来:其他情况下双引号通常可以省略
1、当内容中有空格 echo "hello world" echo nihao 2、当以变量的值进行赋值 version=2.6 pycer="python $version"
-
-
单引号∶ 禁止引用其他变量值,$视为普通字符
-
当要赋值的内容中包含$、"、\具有特殊含义的字符时,应使用单引号括起来。
在单引号的范围内,将无法引用其他变量的值,任何字符均作为普通字符看待。输入什么就显示什么
但赋值内容中包含单引号(')时,需使用’符号进行转义,以免冲突。[root@localhost ~]# test=123 [root@localhost ~]# echo "$test" 123 [root@localhost ~]# echo '$test' $test [root@localhost ~]# echo '\$test' \$test [root@localhost ~]# echo "\$test" $test [root@localhost ~]# echo "'\'$test" '\'123
-
-
反撇号∶命令替换,提取命令执行后的输出结果
- 使用反敝号难以在一行命令中实现嵌套命令替换操作,这时可以改用“$()”来代替反敝号操作,以解决嵌套的问题
- 反撇号括起来的范围内必须是能多执行的命令行,否则将会出错。
5、从键盘输入内容为变量赋值
read 【-p"提示信息"】 变量名
用来提示用户输入信息,从而实现简单的交互过程。执行时将从标准输入设备(键盘)读入一行内容,并以空格为分隔符,将读入的各字段依次赋值给指定的变量(多余的内容赋值给最后一个变量)。若指定的变量只有一个,则将整行内容赋值给此变量。
交互式定义变量(read)
-p 提示用户的信息
-n 定义字符数
-s 不显示用户输入的内容,常用于输入密码 read -s -p "input your password:" pass
-t 定义超时时间,超过多长时间没输自动退出
五、变量作用范围
-
默认情况下,新定义的变量只在当前的Shell环境中有效,因此称为局部变量。当进入子程序或新的子Shell环境时,局部变量将无法再使用
-
可以通过内部命令export将指定的变量导出为全局变量,使用户定义的变量在所有的子Shell环境中能够继续使用
格式1: export 变量名
格式2: export 变量名=变量值
可以使用pstree 命令查看Shell环境
输入bash 命令进入子Shell环境,不保留当前变量
按Ctrl + D组合键或输入exit 命令退出子Shell环境
source 是当前shell,保留变量
export product version #导出为全局变量bashecho "$product $version" #子程序引用全局变量
想永久生效,定义在/etc/profile中
echo "export name age ">/etc/profile
source /etc/profile
每个用户都有自己的环境变量配置文件:~/.bath_profile 、 ~/.bashro
变量优先级:个人环境变量–>全局环境变量
查看环境变量
env
显示系统中已存在的全局环境变量
env(选项)(参数)
-i:开始一个新的空的环境;
-u<变量名>:从当前环境中删除指定的变量。
set
输出当前环境所有变量(包括全局和局部)
set | grep name
PATH
PATH变量用于设置可执行程序的默认搜索路径,当仅指定文件名称来执行命令程序时,Liux系统将在PATH变量指定的目录范围查找对应的可执行文件,如果找不到则会提示"command not found"。
方法一:将脚本的目录加入$PATH
[root@localhost~]#PATH="$PATH:/root"//这时临时的,如果永久生效需要编辑/etc/profile文件
[root@localhost ~]echo SPATH
/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin:/root/bin:/root
[root@localhost ~]test.sh
hello world
方法二:将你自己写的脚本放到$PATH中的某一个目录在Linux系统中,环境变量的全局配置文件为/etc/profile,在此文件中定义的变量作用
于所有用户。除此之外,每个用户还有自己的独立配置文件(~/.bash profile)
修改完了要重新登陆才能生效,如果想立即生效,可以使用source
注意:修改$PATH需要慎重操作,如果找不到了会影响命令的使用!!!
取消环境变量
unset
删除变量或函数
用echo查看
-
用echo查看和引用变量的值,通过在变量名称前添加前导符号"$“,可以引用一个变量的值,使用echo命令可以查看变量,可以在一条echo命令中同时查看多个变量值。当变量名称容易和紧跟其后的其他字符相混淆时,==需要添加大括号”{}”将其括起来,否则将无法确定正确的变量名称。==对于未定义的变量,将显示为空值。
-
version=paython echo ${version}2.6
-
echo选项: echo -n 表示不换行输出 echo -e输出转义字符,将转义后的内容输出到屏幕上 \n换行 \c不换行输出,在"\c"后面不存在字符的情况下,作用相当于echo -n \转义符,跟在\之后的特殊符号将失去特殊含义,变为普通字符。如/$将输出“$“符号,而不当做是变量引用。常用的转义字符如下: \t转义后表示插入tab,即制表符(4个空格) \r回车 \b退格
六、整数变量的运算
在bash环境中也可以进行加减乘除等运算:
运算内容:加(+)、减(-)、乘(*)、除(/)、取余(%)
expr命令
expr可以使用数值直接计算,也可以使用变量进行计算
特殊符号需要转移符,可结合(()) 、 ${} 、
let命令
let运算命令允许改变量值,但是需配合echo命令将其输出,实现自增自减
bc命令
bc命令类似于window的计算器,是交互式的界面,支持小数
可以结合其他命令使用
echo "scale=3;20/3" | bc
容输出到屏幕上
\n换行
\c不换行输出,在"\c"后面不存在字符的情况下,作用相当于echo -n
\转义符,跟在\之后的特殊符号将失去特殊含义,变为普通字符。如/
将
输
出
“
将输出“
将输出““符号,而不当做是变量引用。常用的转义字符如下:
\t转义后表示插入tab,即制表符(4个空格)
\r回车
\b退格
## **六、整数变量的运算**
在bash环境中也可以进行加减乘除等运算:
运算内容:加(+)、减(-)、乘(*)、除(/)、取余(%)
### expr命令
expr可以使用数值直接计算,也可以使用变量进行计算
特殊符号需要转移符,可结合(()) 、 ${} 、
### let命令
let运算命令允许改变量值,但是需配合echo命令将其输出,实现自增自减
### bc命令
bc命令类似于window的计算器,是交互式的界面,支持小数
```bash
可以结合其他命令使用
echo "scale=3;20/3" | bc