Shell脚本学习笔记（从入门到精通）

• 第5章 运算符

• 第6章 条件判断

• 第7章 流程控制（重点）

• • 7.1 if 判断

• 7.2 case 语句

• 7.3 for 循环

• 7.4 while 循环

• 第8章 read读取控制台输入

• 第9章 函数

• • 9.1 系统函数

• 9.2 自定义函数

• 第10章 输入/输出重定向

• • 10.1 重定向介绍

• 10.2 输出重定向

• 10.3 输入重定向

• 10.4 重定向深入讲解

• 10.5 Here Document

• 10.6 /dev/null 文件

• 第11章 Shell工具（重点）

• • 11.1 cut

• 11.2 sed

• 11.3 awk

• 11.4 sort

• 第12章 企业真实面试题（重点）

• • 12.1 京东

• 12.2 搜狐&和讯网

• 12.3 新浪

• 12.3 金和网络

• 第13章 正则表达式语法大全

第1章 Shell概述

=============================================================================

大数据程序员为什么要学习Shell呢？

1）需要看懂运维人员编写的Shell程序。

2）偶尔会编写一些简单Shell程序来管理集群、提高开发效率。

第2章 Shell解析器

==============================================================================

（1）Linux提供的Shell解析器有：

[root@master ~]$ cat /etc/shells

/bin/sh #是bash的一个快捷方式

/bin/bash #bash是大多数Linux默认的shell，包含的功能几乎可以涵盖shell所有的功能

/sbin/nologin #表示非交互，不能登录操作系统

/bin/dash #小巧，高效，功能相比少一些

/bin/csh #具有C语言风格的一种shell，具有许多特性，但也有一些缺陷

/bin/tcsh #是csh的增强版，完全兼容csh

（2）bash和sh的关系

[root@master bin]$ ll | grep bash

-rwxr-xr-x. 1 root root 941880 5月 11 2016 bash

lrwxrwxrwx. 1 root root 4 5月 27 2017 sh -> bash

（3）Centos默认的解析器是bash

[root@master bin]$ echo $SHELL

/bin/bash

第3章 Shell脚本入门

===============================================================================

1）脚本格式

脚本以#!/bin/bash开头（指定解析器）

2）第一个Shell脚本：helloworld

（1）需求：创建一个Shell脚本，输出helloworld

（2）案例实操：

[root@master datas]$ touch helloworld.sh

[root@master datas]$ vi helloworld.sh

在helloworld.sh中输入如下内容

#!/bin/bash

echo “helloworld”

（3）脚本的常用执行方式

第一种：采用bash或sh+脚本的相对路径或绝对路径（不用赋予脚本+x权限）

• sh+脚本的相对路径

[root@master datas]$ sh helloworld.sh

Helloworld

• sh+脚本的绝对路径

[root@master datas]$ sh /home/atguigu/datas/helloworld.sh

helloworld

• bash+脚本的相对路径

[root@master datas]$ bash helloworld.sh

Helloworld

• bash+脚本的绝对路径

[root@master datas]$ bash /home/atguigu/datas/helloworld.sh

Helloworld

第二种：采用输入脚本的绝对路径或相对路径执行脚本（必须具有可执行权限+x）

（a）首先要赋予helloworld.sh 脚本的+x权限

[root@master datas]$ chmod 777 helloworld.sh

（b）执行脚本

• 相对路径（推荐使用）

[root@master datas]$ ./helloworld.sh

Helloworld

• 绝对路径

[root@master datas]$ /home/atguigu/datas/helloworld.sh

Helloworld

注意：第一种执行方法，本质是bash解析器帮你执行脚本，所以脚本本身不需要执行权限。第二种执行方法，本质是脚本需要自己执行，所以需要执行权限

3）第二个Shell脚本：多命令处理

（1）需求： 在/home/atguigu/目录下创建一个cls.txt,在cls.txt文件中增加“I love cls”。

（2）案例实操：

[root@master datas]$ touch batch.sh

[root@master datas]$ vi batch.sh

在batch.sh中输入如下内容

#!/bin/bash

cd /home/atguigu

touch cls.txt

echo “I love cls” >>cls.txt

第4章 Shell中的变量

===============================================================================

4.1 系统变量

---

1）常用系统变量

H O M E 、 HOME、 HOME、PWD、 S H E L L 、 SHELL、 SHELL、USER等

2）案例实操

（1）查看系统变量的值

[root@master datas]$ echo $HOME

/home/atguigu

（2）显示当前Shell中所有变量：set

[root@master datas]$ set

BASH=/bin/bash

BASH_ALIASES=()

BASH_ARGC=()

BASH_ARGV=()

4.2 自定义变量

---

1．基本语法

（1）定义变量：变量=值

（2）撤销变量：unset 变量

（3）声明静态变量：readonly 变量，注意：不能unset

2．变量定义规则

（1）变量名称可以由字母、数字和下划线组成，但是不能以数字开头，环境变量名建议大写

（2）等号两侧不能有空格!

（3）在bash中，变量默认类型都是字符串类型，无法直接进行数值运算。

（4）变量的值如果有空格，需要使用双引号或单引号括起来。

3．案例实操

（1）定义变量A

[root@master datas]$ A=5

[root@master datas]$ echo $A

5

（2）给变量A重新赋值

[root@master datas]$ A=8

[root@master datas]$ echo $A

8

（3）撤销变量A

[root@master datas]$ unset A

[root@master datas]$ echo $A

（4）声明静态的变量B=2，不能unset（重启自动消失）

[root@master datas]$ readonly B=2

[root@master datas]$ echo $B

2

[root@master datas]$ B=9

-bash: B: readonly variable

（5）在bash中，变量默认类型都是字符串类型，无法直接进行数值运算

[root@master ~]$ C=1+2

[root@master ~]$ echo $C

1+2

（6）变量的值如果有空格，需要使用双引号或单引号括起来

[root@master ~]$ D=I love banzhang

-bash: world: command not found

[root@master ~]$ D=“I love banzhang”

[root@master ~]$ echo $D

I love banzhang

（7）可把变量提升为全局环境变量，可供其他Shell程序使用

格式：export 变量名

[root@master datas]$ vim helloworld.sh

在helloworld.sh文件中增加echo $B

#!/bin/bash

echo “helloworld”

echo $B

[root@master datas]$ ./helloworld.sh

Helloworld

发现并没有打印输出变量B的值。

[root@master datas]$ export B

[root@master datas]$ ./helloworld.sh

helloworld

2

4.3 特殊变量：$n

---

1．基本语法

$n（功能描述：n为数字，$0代表该脚本名称，$1-$9代表第一到第九个参数，十以上的参数，十以上的参数需要用大括号包含，如${10}）

2．案例实操

（1）输出该脚本文件名称、输入参数1和输入参数2 的值

[root@master datas]$ touch parameter.sh

[root@master datas]$ vim parameter.sh

#!/bin/bash

echo “$0 $1 $2”

[root@master datas]$ chmod 777 parameter.sh

[root@master datas]$ ./parameter.sh 1 2

parameter.sh 1 2

4.4 特殊变量：$#

---

1．基本语法

$# （功能描述：获取所有输入参数个数，常用于循环）。

2．案例实操

（1）获取输入参数的个数

[root@master datas]$ vim parameter.sh

#!/bin/bash

echo “$0 $1 $2”

echo $#

[root@master datas]$ chmod 777 parameter.sh

[root@master datas]$ ./parameter.sh cls xz

parameter.sh cls xz

2

4.5 特殊变量：$*、$@

---

1．基本语法

$* （功能描述：这个变量代表命令行中所有的参数，$*把所有的参数看成一个整体）

$@ （功能描述：这个变量也代表命令行中所有的参数，不过$@把每个参数区分对待）

2．案例实操

（1）打印输入的所有参数

[root@master datas]$ vim parameter.sh

#!/bin/bash

echo “$0 $1 $2”

echo $#

echo $*

echo $@

[root@master datas]$ bash parameter.sh 1 2 3

parameter.sh 1 2

3

1 2 3

1 2 3

4.6 特殊变量：$？

---

1．基本语法

$？ （功能描述：最后一次执行的命令的返回状态。如果这个变量的值为0，证明上一个命令正确执行；如果这个变量的值为非0（具体是哪个数，由命令自己来决定），则证明上一个命令执行不正确了。）

2．案例实操

（1）判断helloworld.sh脚本是否正确执行

[root@master datas]$ ./helloworld.sh

hello world

[root@master datas]$ echo $?

0

第5章 运算符

=========================================================================

1．基本语法

（1）“$((运算式))”或“$[运算式]”

（2）expr + , - , *, /, % 加，减，乘，除，取余

注意：expr运算符间要有空格

2．案例实操：

（1）计算3+2的值

[root@master datas]$ expr 2 + 3

5

（2）计算3-2的值

[root@master datas]$ expr 3 - 2

1

（3）计算（2+3）X 4的值

• （a）expr一步完成计算

[root@master datas]$ expr expr 2 + 3 * 4 #这个小·是tab上面那个键，不是单引号

20

• （b）采用$[运算式]方式

[root@master datas]$ S=$[(2+3)*4]

[root@master datas]$ echo $S

20

第6章 条件判断

==========================================================================

1．基本语法

[ condition ]（注意condition前后要有空格）

注意：条件非空即为true，[ atguigu ]返回true，[] 返回false。

2.常用判断条件

（1）两个整数之间比较

• = 字符串比较

• -lt 小于（less than）

• -le 小于等于（less equal）

• -eq 等于（equal）

• -gt 大于（greater than）

• -ge 大于等于（greater equal）

• -ne 不等于（Not equal）

（2）按照文件权限进行判断

• -r 有读的权限（read）

• -w 有写的权限（write）

• -x 有执行的权限（execute）

（3）按照文件类型进行判断

• -f 文件存在并且是一个常规的文件（file）

• -e 文件存在（existence）

• -d 文件存在并是一个目录（directory）

3．案例实操

（1）23是否大于等于22

[root@master datas]$ [ 23 -ge 22 ]

[root@master datas]$ echo $?

0

（2）helloworld.sh是否具有写权限

[root@master datas]$ [ -w helloworld.sh ]

[root@master datas]$ echo $?

0

（3）/home/atguigu/cls.txt目录中的文件是否存在

[root@master datas]$ [ -e /home/atguigu/cls.txt ]

[root@master datas]$ echo $?

1

（4）多条件判断（&& 表示前一条命令执行成功时，才执行后一条命令，|| 表示上一条命令执行失败后，才执行下一条命令）

[root@master datas]$ [ condition ] && echo OK || echo notok

OK

[root@master datas]$ [ condition ] && [ ] || echo notok

notok

第7章 流程控制（重点）

==============================================================================

7.1 if 判断

---

1．基本语法

if [ 条件判断式 ];then

程序

fi

或者

if [ 条件判断式 ]

then

程序

fi

注意事项：

• [ 条件判断式 ]，中括号和条件判断式之间必须有空格

• if 后要有空格

2．案例实操

（1）输入一个数字，如果是1，则输出banzhang zhen shuai，如果是2，则输出cls zhen mei，如果是其它，什么也不输出。

[root@master datas]$ touch if.sh

[root@master datas]$ vim if.sh

#!/bin/bash

if [ $1 -eq “1” ]

then

echo “banzhang zhen shuai”

elif [ $1 -eq “2” ]

then

echo “cls zhen mei”

fi

[root@master datas]$ chmod 777 if.sh

[root@master datas]$ ./if.sh 1

banzhang zhen shuai

7.2 case 语句

---

1．基本语法

case $变量名 in

“值1”）

如果变量的值等于值1，则执行程序1

;;

“值2”）

如果变量的值等于值2，则执行程序2

;;

…省略其他分支…

*）

如果变量的值都不是以上的值，则执行此程序

;;

esac

注意事项：

• case行尾必须为单词“in”，每一个模式匹配必须以右括号“)”结束。

• 双分号“;;”表示命令序列结束，相当于java中的break。

• 最后的“*）”表示默认模式，相当于java中的default。

2．案例实操

（1）输入一个数字，如果是1，则输出banzhang，如果是2，则输出cls，如果是其它，输出renyao。

[root@master datas]$ touch case.sh

[root@master datas]$ vim case.sh

!/bin/bash

case $1 in

“1”)

echo “banzhang”

;;

“2”)

echo “cls”

;;

*)

echo “renyao”

;;

esac

[root@master datas]$ chmod 777 case.sh

[root@master datas]$ ./case.sh 1

banzhang

7.3 for 循环

---

1．基本语法1

for (( 初始值;循环控制条件;变量变化 ))

do

程序

done

2．案例实操

（1）从1加到100

[root@master datas]$ touch for1.sh

[root@master datas]$ vim for1.sh

#!/bin/bash

s=0

for((i=0;i<=100;i++))

do

s=$[$s+$i]

done

echo $s

[root@master datas]$ chmod 777 for1.sh

[root@master datas]$ ./for1.sh

5050

3．基本语法2

for 变量 in 值1 值2 值3…

do

程序

done

4．案例实操

（1）打印所有输入参数

[root@master datas]$ touch for2.sh

[root@master datas]$ vim for2.sh

#!/bin/bash

#打印数字

for i in $*

do

echo "ban zhang love $i "

done

[root@master datas]$ chmod 777 for2.sh

[root@master datas]$ bash for2.sh cls xz bd

ban zhang love cls

ban zhang love xz

ban zhang love b

（2）比较$*和$@区别

• （a）$*和$@都表示传递给函数或脚本的所有参数，不被双引号“”包含时，都以$1 $2 …$n的形式输出所有参数。

[root@master datas]$ touch for.sh

[root@master datas]$ vim for.sh

#!/bin/bash

for i in $*

do

echo "ban zhang love $i "

done

for j in $@

do

echo “ban zhang love $j”

done

[root@master datas]$ bash for.sh cls xz bd

ban zhang love cls

ban zhang love xz

ban zhang love bd

ban zhang love cls

ban zhang love xz

ban zhang love bd

• （b）当它们被双引号“”包含时，“$*”会将所有的参数作为一个整体，以“$1 $2 …$n”的形式输出所有参数；“$@”还是会将各个参数分开，以“$1” “$2”…”$n”的形式输出所有参数。

[root@master datas]$ vim for.sh

#!/bin/bash

for i in “$*”

#$*中的所有参数看成是一个整体，所以这个for循环只会循环一次

do

echo “ban zhang love $i”

done

for j in “$@”

#$@中的每个参数都看成是独立的，所以“$@”中有几个参数，就会循环几次

do

echo “ban zhang love $j”

done

[root@master datas]$ chmod 777 for.sh

[root@master datas]$ bash for.sh cls xz bd

ban zhang love cls xz bd

ban zhang love cls

ban zhang love xz

ban zhang love bd

7.4 while 循环

---

1．基本语法

while [ 条件判断式 ]

do

程序

done

2．案例实操

（1）从1加到100

[root@master datas]$ touch while.sh

[root@master datas]$ vim while.sh

#!/bin/bash

s=0

i=1

while [ KaTeX parse error: Expected 'EOF', got '#' at position 13: i -le 100 ] #̲i的值小于100，并不是i小于…i

do

s=$[$s+$i]

i=$[$i+1]

done

echo $s

[root@master datas]$ chmod 777 while.sh

[root@master datas]$ ./while.sh

5050

第8章 read读取控制台输入

=================================================================================

1．基本语法

read(选项)(参数)

选项：

• -p：指定读取值时的提示符；

• -t：指定读取值时等待的时间（秒）。

参数

• 变量：指定读取值的变量名

2．案例实操

（1）提示7秒内，读取控制台输入的名称

[root@master datas]$ touch read.sh

[root@master datas]$ vim read.sh

#!/bin/bash

read -t 7 -p "Enter your name in 7 seconds " NAME

echo $NAME

[root@master datas]$ ./read.sh

Enter your name in 7 seconds xiaoze

xiaoze

第9章 函数

========================================================================

9.1 系统函数

---

1．basename基本语法（返回文件名）

basename [string / pathname] [suffix]

（功能描述：basename命令会删掉所有的前缀包括最后一个（‘/’）字符，然后将字符串显示出来。

选项：suffix为后缀，如果suffix被指定了，basename会将pathname或string中的suffix去掉。

2．案例实操

（1）截取该/home/atguigu/banzhang.txt路径的文件名称

[root@master datas]$ basename /home/atguigu/banzhang.txt

banzhang.txt

[root@master datas]$ basename /home/atguigu/banzhang.txt .txt

banzhang

3 . dirname基本语法（返回路径）

dirname 文件绝对路径

（功能描述：从给定的包含绝对路径的文件名中去除文件名（非目录的部分），然后返回剩下的路径（目录的部分））

4．案例实操

（1）获取banzhang.txt文件的路径

[root@master ~]$ dirname /home/atguigu/banzhang.txt

/home/atguigu

9.2 自定义函数

---

1．基本语法

[ function ] funname[()]

{

Action;

[return int;]

}

funname

2．经验技巧

• 必须在调用函数地方之前，先声明函数，shell脚本是逐行运行。不会像其它语言一样先编译。

• 函数返回值，只能通过$?系统变量获得，可以显示加：return返回，如果不加，将以最后一条命令运行结果，作为返回值。return后跟数值n(0-255)

3．案例实操

（1）计算两个输入参数的和

[root@master datas]$ touch fun.sh

[root@master datas]$ vim fun.sh

#!/bin/bash

function sum()

{

s=0

s=$[ $1 + $2 ]

echo “$s”

}

read -p "Please input the number1: " n1;

read -p "Please input the number2: " n2;

sum $n1 $n2;

[root@master datas]$ chmod 777 fun.sh

[root@master datas]$ ./fun.sh

Please input the number1: 2

Please input the number2: 5

7

第10章 输入/输出重定向

===============================================================================

10.1 重定向介绍

---

大多数 UNIX系统命令从你的终端接受输入并将所产生的输出发送回​​到您的终端。一个命令通常从一个叫标准输入的地方读取输入，默认情况下，这恰好是你的终端。同样，一个命令通常将其输出写入到标准输出，默认情况下，这也是你的终端。

重定向命令列表如下：

| 命令 | 说明 |

| — | — |

| command > file | 将输出重定向到 file |

| command < file | 将输入重定向到 file |

| command >> file | 将输出以追加的方式重定向到 file |

| n > file | 将文件描述符为 n 的文件重定向到 file |

| n >> file | 将文件描述符为 n 的文件以追加的方式重定向到 file |

| n >& m | 将输出文件 m 和 n 合并 |

| n <& m | 将输入文件 m 和 n 合并 |

| << tag | 将开始标记 tag 和结束标记 tag 之间的内容作为输入 |

注意：文件描述符 0 通常是标准输入（STDIN），1 是标准输出（STDOUT），2 是标准错误输出（STDERR）

10.2 输出重定向

---

重定向一般通过在命令间插入特定的符号来实现。特别的，这些符号的语法如下所示:

command1 > file1

上面这个命令执行command1然后将输出的内容存入file1。

注意：任何file1内的已经存在的内容将被新内容替代。如果要将新内容添加在文件末尾，请使用>>操作符。

实例：

1）执行下面的 who 命令，它将命令的完整的输出重定向在用户文件中(users):

$ who > users

自我介绍一下，小编13年上海交大毕业，曾经在小公司待过，也去过华为、OPPO等大厂，18年进入阿里一直到现在。

深知大多数Python工程师，想要提升技能，往往是自己摸索成长或者是报班学习，但对于培训机构动则几千的学费，着实压力不小。自己不成体系的自学效果低效又漫长，而且极易碰到天花板技术停滞不前！

因此收集整理了一份《2024年Python开发全套学习资料》，初衷也很简单，就是希望能够帮助到想自学提升又不知道该从何学起的朋友，同时减轻大家的负担。

既有适合小白学习的零基础资料，也有适合3年以上经验的小伙伴深入学习提升的进阶课程，基本涵盖了95%以上Python开发知识点，真正体系化！

由于文件比较大，这里只是将部分目录大纲截图出来，每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频，并且后续会持续更新

如果你觉得这些内容对你有帮助，可以添加V获取：vip1024c （备注Python）

如果你也是看准了Python，想自学Python，在这里为大家准备了丰厚的免费学习大礼包，带大家一起学习，给大家剖析Python兼职、就业行情前景的这些事儿。

一、Python所有方向的学习路线

Python所有方向路线就是把Python常用的技术点做整理，形成各个领域的知识点汇总，它的用处就在于，你可以按照上面的知识点去找对应的学习资源，保证自己学得较为全面。

二、学习软件

工欲善其必先利其器。学习Python常用的开发软件都在这里了，给大家节省了很多时间。

三、全套PDF电子书

书籍的好处就在于权威和体系健全，刚开始学习的时候你可以只看视频或者听某个人讲课，但等你学完之后，你觉得你掌握了，这时候建议还是得去看一下书籍，看权威技术书籍也是每个程序员必经之路。

四、入门学习视频

我们在看视频学习的时候，不能光动眼动脑不动手，比较科学的学习方法是在理解之后运用它们，这时候练手项目就很适合了。

四、实战案例

光学理论是没用的，要学会跟着一起敲，要动手实操，才能将自己的所学运用到实际当中去，这时候可以搞点实战案例来学习。

五、面试资料

我们学习Python必然是为了找到高薪的工作，下面这些面试题是来自阿里、腾讯、字节等一线互联网大厂最新的面试资料，并且有阿里大佬给出了权威的解答，刷完这一套面试资料相信大家都能找到满意的工作。

成为一个Python程序员专家或许需要花费数年时间，但是打下坚实的基础只要几周就可以，如果你按照我提供的学习路线以及资料有意识地去实践，你就有很大可能成功！
最后祝你好运！！！

效又漫长，而且极易碰到天花板技术停滞不前！**

因此收集整理了一份《2024年Python开发全套学习资料》，初衷也很简单，就是希望能够帮助到想自学提升又不知道该从何学起的朋友，同时减轻大家的负担。
[外链图片转存中…(img-qTbeveVt-1711962333241)]
[外链图片转存中…(img-aHDbR6Xy-1711962333241)]

既有适合小白学习的零基础资料，也有适合3年以上经验的小伙伴深入学习提升的进阶课程，基本涵盖了95%以上Python开发知识点，真正体系化！

由于文件比较大，这里只是将部分目录大纲截图出来，每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频，并且后续会持续更新

如果你觉得这些内容对你有帮助，可以添加V获取：vip1024c （备注Python）
[外链图片转存中…(img-NRaObbTp-1711962333241)]

如果你也是看准了Python，想自学Python，在这里为大家准备了丰厚的免费学习大礼包，带大家一起学习，给大家剖析Python兼职、就业行情前景的这些事儿。

一、Python所有方向的学习路线

Python所有方向路线就是把Python常用的技术点做整理，形成各个领域的知识点汇总，它的用处就在于，你可以按照上面的知识点去找对应的学习资源，保证自己学得较为全面。

二、学习软件

工欲善其必先利其器。学习Python常用的开发软件都在这里了，给大家节省了很多时间。

三、全套PDF电子书

书籍的好处就在于权威和体系健全，刚开始学习的时候你可以只看视频或者听某个人讲课，但等你学完之后，你觉得你掌握了，这时候建议还是得去看一下书籍，看权威技术书籍也是每个程序员必经之路。

四、入门学习视频

我们在看视频学习的时候，不能光动眼动脑不动手，比较科学的学习方法是在理解之后运用它们，这时候练手项目就很适合了。

四、实战案例

光学理论是没用的，要学会跟着一起敲，要动手实操，才能将自己的所学运用到实际当中去，这时候可以搞点实战案例来学习。

五、面试资料

我们学习Python必然是为了找到高薪的工作，下面这些面试题是来自阿里、腾讯、字节等一线互联网大厂最新的面试资料，并且有阿里大佬给出了权威的解答，刷完这一套面试资料相信大家都能找到满意的工作。

成为一个Python程序员专家或许需要花费数年时间，但是打下坚实的基础只要几周就可以，如果你按照我提供的学习路线以及资料有意识地去实践，你就有很大可能成功！
最后祝你好运！！！