吐血整理--Shell编程基础命令总结（一）

文本处理工具

grep工具

grep是行过滤工具，用于根据关键字进行行过滤

语法：

grep [选项] '关键字' 文件名

grep常用选项：

^key 以关键字开头
-E 使用扩展正则匹配
-n 显示关键字行号
key$ 以关键字结尾

alias--定义别名

eg：alias grep='grep --color=auto'  //敲击grep时，相当于敲击grep --color=auto
在命令行定义时不会永久生效，永久生效需要改配置文件 

cut列截取

cut 选项 文件名

常用选项 -c 以字符为单位进行分隔、截取
-d 自定义分隔符，默认为制表符\t 
-f 与-d一起使用，指定截取哪个区域 

查看系统的运行级别

runlevel

sort工具

用于排序，将文件的每一行作为一个单位，从首字符向后，依次按ASCII码值进行比较，最后将他们按升序输出

-u 去除重复行 
-r 降序排列，默认是升序 
-o 将排序结果输出到文件中，类似重定向符号> 
-R 随机排序。每次输出的结果都不同 

uniq工具

去除连续的重复行

-i 忽略大小写 
-c 统计重复行次数 
-d 只显示重复行 

tee

从标准输入读取并写入到标准输出和文件，即双向覆盖重定向

diff工具

逐行比较文件的不同

-b 不检查空格 
-B 不检查空白行 
-i 不检查大小写 
-w 忽略左右空格 
--normal 正常格式显示 
-c 上下文格式显示 -u 合并格式显示 

eg: 创建两个文件file1.txt file2.txt

root@lijingtest-VirtualBox:~# cat file1.txt
qqq
qqq
wer
111
222
333
111
111
222
bushi
shide
haode
haode
wochicaomeila
haode
root@lijingtest-VirtualBox:~# cat file2.txt
haode
shide
wochicaomeola
xixi
cici
xiaoniu
lijing
111
111
222
111
222

1. 正常显示 

1. 上下文格式显示

3.合并格式显示 

tips：当以一个文件为标准去修改其他文件，且修改的地方较多时，可以通过打补丁的方式实现

1. 先找出文件不同，然后输出到一个文件

root@lijingtest-VirtualBox:~# diff -uN file1.txt file2.txt > file.patch

2.将不同的内容打补丁到文件 
root@lijingtest-VirtualBox:~# patch file1.txt file.patch
patching file file1.txt
3. 验证测试

root@lijingtest-VirtualBox:~# diff file1.txt file2.txt
root@lijingtest-VirtualBox:~# 

paste

用于合并文件

shell脚本

由shell命令组成的执行文件，将一些命令整合到一个文件中，进行处理业务逻辑，脚本不用编译即可运行

常用命令： echo、@、call、pause、rem（::代替rem） echo off标识在此语句后所有运行的命令都不显示命令行本身 @与echo off相像，但是他加在每个命令行的最前面，表示运行时不显示这一行的命令行
call调用另一个批处理文件
pause 暂停批处理的执行
echo 当程序运行时，显示或隐藏批处理程序中的正文。
语法

echo [on|off]
显示一条命令
echo [message]

call:
从一个批处理程序中调用另一个批处理程序，也不会引起第一个批处理的终止
语法

call [driver:][path]filename[batch-parameters]

[driver:][path]filename:指定要调用的批处理程序的名字及其存放处，文件名必须用.bat作扩展名 batch-parameters：指定批处理程序所需的命令行信息

pause:暂停批处理程序的执行并显示一条信息

批处理文件的参数

%[1-9]表示参数，参数时指在运行批处理文件时在文件名后加的以空格或tab分隔的字符串

特殊命令

if goto choice for if是条件语句，用来判断是否符合规定的条件，从而决定执行不同的命令

#  以“#”
开头的是注释
单行注释：#
多行注释： :<

变量类型

• 1.局部变量：局部变量在脚本或命令中定义，仅在当前shell实例中有效，其他shell启动的程序不能访问
• 2.环境变量：所有的程序，包括shell启动的程序，都能访问环境变量
• 3.shell变量:shell变量是由shell程序设置的特殊变量，shell变量中有一部分是环境变量，有一部分是局部变量，这些变量保证了shell的正常运行

• 创建普通变量：name="test" =两边不可有空格
• 创建只可在函数体中使用的局部变量：local name="test" 使用local修饰的变量在函数体外无法访问，并且local只能在函数体内使用
• 使用变量：echo $name或者echo ${name}
• 变量重新赋值：name="new_test"
• 只读变量：name="only_read"->readonly name 使用readonly标识后的变量，不可被修改
• 删除变量：unset name； 删除之后不可访问，删除不掉只读变量

字符串变量

单引号

• 1.单引号变量var='test',只能原样输出，变量无效
• 2.单引号中不能出现一个单独的单引号，转义也不可以

shell变量表达式

表达式	说明
${#string}	计算string的长度
${string：pos}	从pos开始提取字符串
${string：pos：len}	从pos开始提取长度为len的字符串
${string#substr}	从开头删除最短匹配子串
${string##substr}	从开头删除最长匹配子串
${string%substr}	从结尾删除最短匹配子串
${string%%substr}	从结尾删除最长匹配子串

shell数组

定义数组

在shell中，用括号来表示数组，数组元素用“空格”符号分隔开。定义数组的一般形式为：

数组名=（值1 值2 ... 值n）
eg：
array_name=(value0 value1 value2)

还可以单独定义数组的各个分量

array_name[0]=value0
array_name[1]=value1
array_name[n]=valuen

可以不使用连续的下标，而且下标的范围没有限制

读取数组

读取数组元素值的一般格式是：

${数组名[下标]}

使用@符号可以获取数组中的所有元素，例如：

echo ${array_name[@]}

获取数组的长度的方法与获取字符串长度的方法相同，例如：

# 取得数组元素的个数
length=${#array_name[@]}
# 或者
length=${#array_name[*]}
# 取得数组单个元素的长度
lengthn=${#array_name[n]}

shell传递参数

在执行shell脚本时，向脚本传递参数，脚本内获取参数的格式为：$n。n代表一个数字，1为执行脚本的第一个参数，2为执行脚本的第二个参数...

shelll基本运算符

原生bash不支持简单的数学运算，但是可以通过其他命令来实现，例如awk和expr，expr最常用。expr是一款表达式计算工具，能完成表达式的求值操作， eg：

#!/bin/bash
val=`expr 2 + 2`
echo "两数之和为：$val"

注意：

1. 表达式和运算符之间要有空格，例如2+2是不对的，必须写成2 + 2
2. 完整地表达式要被``包含，反引号

算术运算符

+、-、*、/、%、=、==、!=

==:相等。用于比较两个数字，相同则返回true [ $a == $b ]
条件表达式要放在方括号之间，并且要有空格
注意：*前边必须加反斜杠(\ )才能实现乘法运算
if..then..fi是条件语句

关系运算符

关系运算符只支持数字，不支持字符串，除非字符串的值是数字

1. -eq 检测两数是否相等
2. -ne 检测两数是否不相等
3. -gt 检测左边的数是否大于右边的
4. -lt 检测左边的数是否小于右边的
5. -ge 检测左边的数是否大于等于右边的
6. -le 检测左边的数是否小于等于右边的

布尔运算符

1. ！ 非运算，表达式为true则返回false
2. -o 或运算，有一个表达式为true则返回true
3. -a 与运算，有两个表达式都为true才返回true

逻辑运算符

1. && 逻辑的and
2. || 逻辑的or

字符串运算

1. = 检测两个字符串是否相等，相等则返回true
2. != 检测两个字符串是否不相等
3. -z 检测字符串长度是否为0，为0则返回true
4. -n 检测字符串长度是否不为0，不为0返回true
5. $ 检测字符串是否为空，不为空返回true

文件测试运算符

1. -b file 检测文件是否是块设备文件，如果是，则返回 true。
2. -c file 检测文件是否是字符设备文件，如果是，则返回 true。
3. -d file 检测文件是否是目录，如果是，则返回 true。
4. -f file 检测文件是否是普通文件（既不是目录，也不是设备文件），
5. -g file 检测文件是否设置了 SGID 位，如果是，则返回 true。
6. -k file 检测文件是否设置了粘着位(Sticky Bit)，如果是，则返回 true。
7. -p file 检测文件是否是有名管道，如果是，则返回 true。
8. -u file 检测文件是否设置了 SUID 位，如果是，则返回 true。
9. -r file 检测文件是否可读，如果是，则返回 true。
10. -w file 检测文件是否可写，如果是，则返回 true。
11. -x file 检测文件是否可执行，如果是，则返回 true。
12. -s file 检测文件是否为空（文件大小是否大于0），不为空返回 true。
13. -e file 检测文件（包括目录）是否存在，如果是，则返回 true。
14. -S 判断某文件是否socket
15. -L 检测文件是否存在并且是一个符号链接

shell printf命令

eg：

printf "%-10s %-8s %-4s\n" 姓名 性别 体重kg  
printf "%-10s %-8s %-4.2f\n" 郭靖 男 66.1234
printf "%-10s %-8s %-4.2f\n" 杨过 男 48.6543
printf "%-10s %-8s %-4.2f\n" 郭芙 女 47.9876

%s %c %d %f 都是格式替代符，％s 输出一个字符串，％d 整型输出，％c 输出一个字符，％f 输出实数，以小数形式输出。

%-10s 指一个宽度为 10 个字符（- 表示左对齐，没有则表示右对齐），任何字符都会被显示在 10 个字符宽的字符内，如果不足则自动以空格填充，超过也会将内容全部显示出来。

%-4.2f 指格式化为小数，其中 .2 指保留2位小数。

printf的转义序列

shell条件分支结构语句

单分支判断语句 格式：if条件；then结果fi，最后面一定要有fi，在shell脚本里，控制分支结构结束都要和开头的单词相反

dir 显示文件夹内容

dir #显示当前目录中的文件和子目录
dir /a #显示当前目录中的文件和子目录，包括隐藏文件和系统文件
dir c: /a:d             #显示 C 盘当前目录中的目录
dir c: /a:-d            #显示 C 盘根目录中的文件
dir c: /b/p            #/b只显示文件名，/p分页显示
dir *.exe /s            #显示当前目录和子目录里所有的.exe文件

cd //切换目录
md //创建目录
rd //删除目录
del //删除文件

ren重命名 cls清屏 type显示文件内容 copy拷贝文件

& //顺序执行多条命令，不管命令是否执行成功
&&  //顺序执行多条命令，当碰到执行出错的命令后将不再执行后面的命令
|| //顺序执行多条命令，当碰到执行正确的命令后将不再执行后边的命令
| //管道命令
dir *.*/s/a|find /c ".exe" //表示先执行dir命令，对其输出后的结果执行后面的find命令
>和>>  //输出重定向命令
> //清除文件中原有的内容后再写入
>> //追加内容到文件末尾，而不会清除原有的内容
< //从文件中获得输入信息，而不是从屏幕上
start //批处理中调用外部程序的命令，否则等外部程序执行完才继续执行剩下的指令
call  //批处理中调用另一个批处理的命令，否则剩下的批处理指令将不会被执行
choice 选择命令
assoc 设置‘文件扩展名’关联，关联到‘文件类型’
ftype  设置‘文件类型’关联，guanliandao‘执行程序和参数’
assoc  //显示所有‘文件扩展名’关联
assoc .txt //显示.txt代表的文件类型，结果显示.txt=txtfile

shell函数

函数定义格式如下：

[ function ] funname [ () ]
{
    action;
    [return int;]
}

说明：

1. 可以带function fun（）定义，也可以直接fun（）定义，不带任何参数
2. 参数返回，可以显示加：return 返回，如果不加，将以最后一条命令运行结果，作为返回值。return后跟数值n(0-255)

eg:

funWithReturn(){
    echo "这个函数会对输入的两个数字进行相加运算..."
    echo "输入第一个数字: "
    read aNum
    echo "输入第二个数字: "
    read anotherNum
    echo "两个数字分别为 $aNum 和 $anotherNum !"
    return $(($aNum+$anotherNum))
}
funWithReturn
echo "输入的两个数字之和为 $? !"

函数返回值在调用该函数后通过$?来获得 注意:所有函数必须在使用前定义。调用函数仅仅使用其函数名即可