python代替shell脚本_你还不会shell脚本吗，我来教你

这几天也是刚学习了shell脚本的编写，虽然他不像Python、Java那样能够编写很大型的项目(当然我是这么认为)，但是在操控Linux系统方面，还是有独特的优势的，当然在学习过程中我们也能更好的了解Linux。接下来，就开始学习吧。后面会有几个小例子，当然都是别的地方挪过来的，我就是代码的搬运工，嘿嘿。喜欢学习的同志们可以点击Python聚焦专栏，查看更多知识。

基本概念

解释器种类

Bourne Shell（/usr/bin/sh或/bin/sh）

Bourne Again Shell（/bin/bash）

C Shell（/usr/bin/csh）

K Shell（/usr/bin/ksh）

Shell for Root（/sbin/sh）

在一般情况下，人们并不区分 Bourne Shell 和 Bourne Again Shell，所以，像 #!/bin/sh，它同样也可以改为 #!/bin/bash。

脚本编写

指定使用的解释器类型

#!/bin/bash

运行方式

作为可执行程序

chmod +x ./test.sh # 修改权限

./test.sh # 执行

运行时一定要写成./test.sh，因为直接写test.sh，linux会去PATH里寻找，而一般只有/bin,/sbin,/usr/bin,/usr/sbin等在PATH中，所以使用./test.sh告诉系统，就在本目录下找

作为解释器参数

这种方式可以不用在sh文件中写明解释器类型，写了也是没有用的

/bin/sh test.sh

基本语法

变量

定义方式和python类似，只不过定义过程中不允许使用空格，默认都是字符串类型

declare命令定义有类型的变量

-i : 定义整型变量

-a : 定义一个数组

-f : 查看系统中所有定义的函数

-F : 查看系统中所有定义的函数名称

-x : 声明一个环境变量--在脚本文件中可以直接使用的变量

取消定义的变量：把命令减号改成加号再执行

使用时只需要使用$ / ${ }就可以了

只读变量：在变量定义后，再使用readonly 修饰，再次赋值会报错

删除变量：unset var_name,不能删除只读变量

变量数据修改

语法

说明

${var_name#规则}

从变量开头进行匹配，将符合最短的数据删除

${var_name##规则}

从变量开头进行匹配，将符合最长的数据删除

${var_name%规则}

从变量末尾进行匹配，将符合最短的数据删除

${var_name%%规则}

从变量末尾进行匹配，将符合最长的数据删除

${变量名/旧字符串/新字符串}

变量内容符合旧字符串，就将第一个替换

${变量名//旧字符串/新字符串}

变量内容符合旧字符串，就全部替换

字符串

Shell字符串

单引号：不能使用变量

双引号：可以使用变量，并转义\n等字符

反引号：用于保存要执行的命令，同：$() 【点击例子】

在进行拼接的时候是可以出现以下形式的：

"Hello, "$world""

'Hello, '$world''

expr命令是从1开始索引，而普通的提取都是从零开始索引的

求长度

获取字符串长度：$#var_name

${#str}

expr lenth $str

求字串索引

expr index $str substr_reg

substr其实索引的是其每个字符，返回最小索引的那个

匹配的字串的长度

expr match $str substr_reg

截取

${str:start}

${str:start:lenth}

${str:(start)}/\${str: -start} start为负数，表示从尾部开始

expr substr $str $start $length

数组

定义：

array_name=(value0 value1 value2 value3) 使用空格分隔元素

array_name[0]=value0 / array_name[1]=value1下标可以不连续

读取：

单个读取：${array_name[index]}

全部读取：${array_name[@]}

获取长度：

数组长度：length=${#array_name[@]}/length=${#array_name[*]}

单个元素长度：lengthn=${#array_name[n]}

注释

单行：#

多行：

：<

使用其他符号替代EOF,如：'

函数

定义

function func_name { }

func_name ( ) { }

返回值

return : 一般返回一个整数，用于做判断

echo ： 用于返回数据

printf

局部变量

local修饰，不进行修饰那么函数执行后，其他地方也可以使用。

函数库

文件后缀是任意的，一般为lib

一般不会赋予可执行权限

第一行一般使用#!/bin/echo输出警告信息，避免用户执行

获取命令行参数

$num:num为要获取的参数位置，从0开始，分别代表文件名，参数1，参数2

$#:传递到脚本的参数个数

&dollar;&dollar;:脚本运行的当前进程ID号

$!:后台运行的最后一个进程的ID号

$?:显示最后命令的退出状态。0表示没有错误，其他任何值表明有错误。

$-:显示Shell使用的当前选项，与set命令功能相同。

$* / $@:以一个单字符串显示所有向脚本传递的参数。

相同点：都是引用所有参数。

不同点：只有在双引号中体现出来。假设在脚本运行时写了三个参数 1、2、3，，则 " * " 等价于 "1 2 3"（传递了一个参数），而 "@" 等价于 "1" "2" "3"（传递了三个参数）。

中括号的使用(一般可以使用test命令替换)

一个变量是否为0, [ $var -eq 0 ]

ne:不等于

lt/gt：小于/大于

le/ge：小于等于/大于等于

一个文件是否存在，[ -e $var ], 是否是目录，[ -d $var ]

两个字符串是否相同， [[ $var1 = $var2 ]]

-a/-o：and/or

-e : exist

-r : 是否可读

-w : 是否可写

-n ：判断字符串长度是否非0

-z ：判断字符串长度是否为0

$ :判断字符串是否非空

运算符：原生bash不支持简单的数学运算，需要使用awk和expr，expr最常用,并且只能进行整数运算

表达式和运算符之间要有空格

完整的表达式要被 包含

带有转移的字符需要使用\修饰才能使用

使用$(())中间的运算符不需要转义并且不要求有空格，不能进行相等和不等的判断

echo `expr 2 + 2` # 输出4

成立返回1，不成立返回0

在 MAC 中 shell 的 expr 语法是：$((表达式))，此处表达式中的 "*" 不需要转义符号 ""

浮点数计算：bc

echo "scale=2;1+1.2" | bc

几个常用命令

read命令

从标准输入中接收一行，并对修饰的变量赋值

read -p "请输入一段文字:" -n 6 -t 5 -s password

-p 输入提示文字

-n 输入字符长度限制(达到6位，自动结束)

-t 输入限时

-s 隐藏输入内容

echo

-e 开启转义，对字符串中的转义字符进行转义操作，不区分单双引号

printf

printf "%s" jim

test：一般用于替换中括号

test $num = $num2

流程控制

if . . . else

if condition

then

command1

elif condition1

then

command2

else

commandN

fi

for . . . in

for var in data

do

command1

done

while

while condition

do

command

done

until：与while相反操作，条件为true时退出循环

死循环

while ：

do

command

done

# 使用true

while true

do

command

done

# 使用for

for (( ; ; ))

case

case value in

value1)

command1

;;

value2）

command2

;;

*)

command2

;;

esac

let执行一个或多个表达式

sed(Stream Editor)命令详解，对查找到的数据进行处理【点击例子】

# 语法格式：

sed [option] "pattern command" file_name

# 删除文件第一行

sed -i '1d' file_name

option选项

n:只输出匹配的行

e:需要匹配的条件，可以指定多个-e "pattern command"

f:指定sed文件，用于封装替换"pattern command"

r:用于支持正则表达式

修改输出内容：sed -n 's/love/like/g;p' sed.txt

i:修改源文件

pattern

可以使用正则表达式

可以使用变量，只要按照脚本使用变量就可以：双引号，$var_name

匹配/需要进行转义

按行匹配的时候，行数在后面如果小于前一个匹配模式，那么久只显示满足前一个条件的行

=：显示行号

command

a : 在匹配到行的下一行添加字符串

i ：在匹配到行的上一行添加字符串

r ：在匹配到行的下一行添加file内容

w ：将匹配到的行写入文件

d ：删除数据

p ：打印数据

g ：修改数据时全部匹配，3g表示从第三个开始全部修改，ig忽略大小写

= ：显示匹配到的行号

反向引用

在使用替换字符的时候，修改内容使用&表示使用被替换的条件

# 在匹配到^la..jim的后面加shuai

# &：全匹配，\1：其使用了正则的分组，所以前面需要使用小括号括起来

sed -i 's/^la..jim/&shuai/g' sed.txt

awk工作模式【点击例子】

# 语法格式：

awk 'BEGIN{}pattern{commands}END{}' file_name

适合文本处理和报表生成

小例子

查询所有用户

for user in `cat /etc/passwd | cut -d ":" -f 1`

do

echo "$user"

done

启动nginx

nginx_num_process=$(ps -ef | grep nginx | grep -v grep | wc -l)

if [ nginx_num_process -eq 0 ];then

systemctl start nginx

fi

用户输入num,求1-num之和

while true

do

read -p "pls input a positive number: " num

expr $num + 1 &> /dev/null

if [ $? -eq 0 ];then

if [ `expr $num \> 0` -eq 1 ];then

for((i=1;i<=$num;i++))

do

sum=`expr $sum + $i`

done

echo "1+2+3+....+$num = $sum"

exit

fi

fi

echo "error,input enlegal"

continue

done

检查Nginx是否正常运行，宕机则启动它

this_pid=$$

while true

do

ps -ef | grep nginx | grep -v grep | grep -v $this_pid &> /dev/null

if [ $? -eq 0 ];then

echo "Nginx is running well"

sleep 3

else

systemctl start nginx

echo "Nginx is down,Start it...."

fi

done

查找mysql配置文件中有几段

FILE_NAME=/root/lesson/5.6/my.cnf

function get_all_segments

{

echo "`sed -n '/\[.*\]/p' $FILE_NAME | sed -e 's/\[//g' -e 's/\]//g'`"

}

function count_items_in_segment

{

items=`sed -n '/\['$1'\]/,/\[.*\]/p' $FILE_NAME | grep -v "^#" | grep -v "^$" | grep -v "\[.*\]"`

index=0

for item in $items

do

index=`expr $index + 1`

done

echo $index

}

number=0

for segment in `get_all_segments`

do

number=`expr $number + 1`

items_count=`count_items_in_segment $segment`

echo "$number: $segment $items_count"

done

删除配置文件中所有的注释行和空行

sed -i '/[:blank:]*#/^$/d' config.cnf

在非#注释行前加*

sed -i 's/^[^#]/\*&/g' config.cnf

文本格式化数据插入mysql

user=""

password=""

host=""

mysql_conn="mysql -u"$user" -p"$password" -h"$host""

IFS="：" # 内置分隔符变量

cat data.txt | while read id name birth sex

do

$mysql_conn -e "insert into school values('$id','$name','$birth','$sex')"

done

脚本使用ftp

ftp -inv << EOF

open ftp_ip_addr

user user_name password

put file_name

bye

EOF #必须顶格写

小东东

nohub + & 后台启动 ： nohub不间断的运行程序，关闭窗口也不会关闭进程，&用于后台运行

netstat -tnlp | grep port ： 一般用于查看端口

&&当左侧的命令返回0(成功)才会执行右侧命令

cut -d ":"制定分隔符

free -m：内存使用情况

df -h:磁盘使用情况

n >& m：将输出文件 m 和 n 合并

n <& m：将输入文件 m 和 n 合并

<< tag：将开始标记 tag 和结束标记 tag 之间的内容作为输入

grep -E等同于egrep，用于扩展支持正则表达式

cat -n file显示行号输出

/sbin/nologin 不可以登陆的用户

[:blank:]表示空格

^$表示空行

sh -x可以查看执行过程

根据其他表的结构创建新表

create table new_table like other_table

mysql -B不显示边框 -E表示垂直显示 -H输出html -X输出xml -N不显示列名

mysqldumps备份mysql

d :只导出表结构

t ：只导出数据，不导出建表语句

A ：导出所有数据库

B ：导出一个或者多个数据库