linux-shell编程

shell编程

1. 变量、条件判断、流程控制、函数

$n   （功能描述：n为数字，$0代表该脚本名称，$1-$9代表第一到第九个参数，十以上的参数，十以上的参数需要用大括号包含，如${10}） $#   （功能描述：获取所有输入参数个数，常用于循环,判断参数的个数是否正确以及加强脚本的健壮性）。 $*    （功能描述：这个变量代表命令行中所有的参数，$*把所有的参数看成一个整体） $@  （功能描述：这个变量也代表命令行中所有的参数，不过$@把每个参数区分对待）   $？  （功能描述：最后一次执行的命令的返回状态。如果这个变量的值为0，证明上一个命令正确执行；如果这个变量的值为非0（具体是哪个数，由命令自己来决定1-255），则证明上一个命令执行不正确了。）

read读取控制台输入 1）基本语法 read  (选项)  (参数) 选项： -p：指定读取值时的提示符； -t：指定读取值时等待的时间（秒）如果-t不加表示一直等待 参数        变量：指定读取值的变量名

执行系统函数需要用例如`date`特殊符号包裹，才可显示          （（））等价于[]

if条件判断   >    -gt(greater than)    <    -lt(less than)     >=   -ge(greater equal)  <=   -le(less than) ==   -eq(equal) !=    -ne(not equal) （1）单分支 if [ 条件判断式 ];then     程序 fi 或者 if  [ 条件判断式 ] then     程序 fi （2）多分支 if [ 条件判断式 ] then     程序 elif [ 条件判断式 ] then        程序 else        程序 fi

$?返回0表示上一个命令执行成功 $?返回1-255表示上一个命令执行成功

修改文件名mv 原文件名 新文件名

for循环 1）基本语法1 for (( 初始值;循环控制条件;变量变化 )) do     程序 done 普通for可循环和增强for循环 for((i=0;i<=100;i++))

while循环 1）基本语法 while [ 条件判断式 ] do     程序 done while循环中break和continue区别 while循环读取输出文件内容       遍历读取并查找，使用管道操作grep搜索内容

case语句 1）基本语法 case $变量名 in "值1"）     如果变量的值等于值1，则执行程序1 ;; "值2"）     如果变量的值等于值2，则执行程序2 ;;     …省略其他分支… *）     如果变量的值都不是以上的值，则执行此程序 ;; esac 注意事项： （1）case行尾必须为单词“in”，每一个模式匹配必须以右括号“）”结束。 （2）双分号“;;”表示命令序列结束，相当于java中的break。 （3）最后的“*）”表示默认模式，相当于java中的default。    实现简易计算器：函数或直接计算两种方式

函数

2.文件归档、正则表达式

touch   创建一个文件 [atguigu@hadoop101 shells]$ touch for1.sh [atguigu@hadoop101 shells]$ vim for1.sh #!/bin/bash sum=0 for((i=0;i<=100;i++)) do         sum=$[$sum+$i] done echo $sum

find 查找指定目录下的文件夹名

head – n 2 显示文件前两行

tail – n 2 显示文件末两行

文件归档tar（可搭配定时器定时备份文档）

正则表达式 正则表达式使用单个字符串来描述、匹配一系列符合某个语法规则的字符串。在很多文本编辑器里，正则表达式通常被用来检索、替换那些符合某个模式的文本。在Linux中，grep，sed，awk等命令都支持通过正则表达式进行模式匹配。 常规匹配：一串不包含特殊字符的正则表达式匹配它自己，例如： [atguigu@hadoop101 shells]$ cat /etc/passwd | grep atguigu 就会匹配所有包含atguigu的行 参数： 1）-i 忽略大小写 2）-E "正则表达式" 3）-n 显示匹配的行号，^$ 匹配空行 4）-c 显示匹配的行数，^$ 匹配空行 5）cat -b 表示同时显示匹配的行数 6）-An  显示匹配行及下n行 7）-Bn  显示匹配行及上n行 8）-n  显示匹配上及上下各n行 10.2 常用特殊字符 1）特殊字符：^ ^ 匹配一行的开头，例如： 会匹配出所有以root开头的行 2）特殊字符：$ $ 匹配一行的结束，例如 会匹配出所有以bash结尾的行 ^$ 匹配空行 3）特殊字符：. . 匹配一个任意的字符，例如 [atguigu@hadoop101 shells]$ cat /etc/passwd | grep r..t 会匹配包含rabt,rbbt,rxdt,root等的所有行 4）特殊字符：* * 不单独使用，他和上一个字符连用，表示匹配上一个字符0次或多次，例如 [atguigu@hadoop101 shells]$ cat /etc/passwd | grep ro*t 会匹配rt, rot, root, rooot, roooot等所有行 思考：.* 匹配什么？ 5）特殊字符：[ ] [ ] 表示匹配某个范围内的一个字符，例如 [6,8]------匹配6或者8 [0-9]------匹配一个0-9的数字 [0-9]*------匹配任意长度的数字字符串 [a-z]------匹配一个a-z之间的字符 [a-z]* ------匹配任意长度的字母字符串 [a-c, e-f]-匹配a-c或者e-f之间的任意字符 [atguigu@hadoop101 shells]$ cat /etc/passwd | grep r[a,b,c]*t 会匹配rt,rat, rbt, rabt, rbact,rabccbaaacbt等等所有行 6）特殊字符：\ \ 表示转义，并不会单独使用。由于所有特殊字符都有其特定匹配模式，当我们想匹配某一特殊字符本身时（例如，我想找出所有包含 '$' 的行），就会碰到困难。此时我们就要将转义字符和特殊字符连用，来表示特殊字符本身，例如 [atguigu@hadoop101 shells]$ cat /etc/passwd | grep a\$b 就会匹配所有包含 a$b 的行。

sed （1）语法 sed [ option 参数]   1）-n 不自动打印到操作台中  2）-i 直接编辑文件 （2） cat fstab -n | sed 5p              编辑第五行，并在屏幕中显示 cat fstab -n | sed -n 4p          只显示第4行 cat fstab -n | sed -n 3,5p       显示3-5行内容 cat fstab -n | sed -n '3p;5p'    显示第三行和第五行 （3）'/正则表达式或内容/p' sed -n '/etc/p' fstab       显示etc所在行 sed -n '/#/!p' fstab        显示不带#的行 sed -n '/\:/p' fstab         显示含：的行（：是特殊字符，需要使用\转译） sed -n '/^UUID/p' fstab       显示以UUID开头的行 sed -n '/^$/!p' fstab       不显示空白行 sed -n '/^$/!p' fstab | sed -n '/^#/!p'    不显示空白行和#所在行 i、a—> 追加 sed '1ahello' test.txt    1a代表在第一行后下一行加入hello显示，不改变原文件 sed 'ikb23' test.txt   i表示从第一行开始，每隔一行插入字符 sed -i '1abigdata' test.txt    -i直接在原文件内操作，会修改文件 sed '4ihello' test.txt   4i在第四行加入hello，其他内容向下行迁移 sed '/22/achina' test.txt     在匹配22的所有行的下一行添加china（批量添加） sed '$aend' test.txt     $a在文件最后一行追加end sed '/22/igood' test.txt   在匹配22的所有行的上一行添加china（批量添加） sed '1cjavaweb' test.txt   1c将第一行的内容替换为javaweb sed '/bigdata/c大数据' test.txt   将匹配到的bigdata行更改为大数据 d-->删除 sed '1d' test.txt   将第一行删除 sed '1~2d' test.txt   从第一行开始，隔行删除，删除奇数行 sed '2~2d' test.txt    从第二行开始，隔行删除，删除奇数行 sed '1,5d' test.txt    删除第一行至第五行 sed '1,2!d' test.txt    删除 除了1-2行之外的行 sed '$d' test.txt       $d删除最后一行 sed '/bigdata/,2d' test.txt  删除匹配到的行及以下2行 sed '/bigdata/,$d' test.txt   删除匹配到的行至最后一行 sed '/^$/d' test.txt   删除匹配到的空行 sed '/22\|^$/!d' test.txt   不删除匹配到的行 s—> 替换 sed 's/22/erer/' test.txt   将匹配到的22替换成erer（非整行替换）

3. Shell工具

3.1  cut cut的工作就是“剪”，具体的说就是在文件中负责剪切数据用的。cut 命令从文件的每一行剪切字节、字符和字段并将这些字节、字符和字段输出。 1）基本用法 cut  [选项参数]  filename        说明：默认分隔符是制表符 2）选项参数说明 选项参数       功能 -f            列号，提取第几列 -d            分隔符，按照指定分隔符分割列，默认是制表符“\t” -c            按字符进行切割 后加加n 表示取第几列  比如 -c 1

3.2  awk 一个强大的文本分析工具，把文件逐行的读入，以空格为默认分隔符将每行切片，切开的部分再进行分析处理。 1）基本用法 awk  [选项参数] ‘/pattern1/{action1}  /pattern2/{action2}...’ filename pattern：表示awk在数据中查找的内容，就是匹配模式 action：在找到匹配内容时所执行的一系列命令 2）选项参数说明 选项参数       功能 -F    指定输入文件折分隔符 -v    赋值一个用户定义变量 3）案例实操 取出2,4,6列的内容，默认分隔符为空格和制表符 取出2,4,6列的内容，指定分隔符为：和， （1）搜索passwd文件以root关键字开头的所有行，并输出该行的第7列。 （2）搜索passwd文件以root关键字开头的所有行，并输出该行的第1列和第7列，中间以“，”号分割。 （3）只显示/etc/passwd的第一列和第七列，以逗号分割，且在所有行前面添加列名user，shell在最后一行添加"end of shell"。 注意：BEGIN 在所有数据读取行之前执行；END 在所有数据执行之后执行。 （5）将passwd文件中的用户id增加数值1并输出（使用-v参数） 4）awk的内置变量 变量       说明 FILENAME   文件名 NR  已读的记录数（行号） NF  浏览记录的域的个数（切割后，列的个数） 5）案例实操 打印$2列值小于5.0全部行的内容 打印$2列的最大值 （1）统计passwd文件名，每行的行号，每行的列数 （2）查询文件输出结果中的空行所在的行号 （3）切割IP

综合练习：编写脚本。实现给某个用户发送消息的功能