shell中的文本处理工具

1.grep命令的基本用法

grep [Globally search a Regular Expression and Print]
grep
grep -E = egrep

---

(1) grep文件处理匹配规则

##grep 格式##
grep   匹配条件   处理文件
grep root passwd          #过滤root关键字
grep -i root passwd       ##后略大小写
grep -E "\<root" passwd   ##root字符之前不能有字符
grep -E "root\>" passwd   ##root字符之后不能有字符
grep -数字                ##显示过滤行以及上面几行和下面几行
grep -n                   ##显示匹配的行所在行号
grep -A                   ##显示过滤行以及下面几行
grep -B                   ##显示过滤行以及上面几行
grep -v                   ##反向过滤

---

(2)grep字符数量匹配规则

^westos     ##以westos开头
westos$     ##以westos结尾
w....s      ##w开头s结尾中间4个任意字符
.....s      ##s结尾前面5个任意字符
*           ##字符出现任意
?           ##0到1次 
+           ##1次到任意次
{n}         ##n次
{m,n}       ##m到n次 
{0,n}       ##0-n次
{,n}        ##0-n次
{m,}        ##最少m次
(lee){2}    ##lee字符串出现2次

---

2.sed命令的基本用法

命令格式：
sed 参数 命令 处理对象
sed 参数 处理对象 -f 处理规则文件

---

对字符的处理

（1）p ## 显示

sed -n 5p westos       ##显示第五行
sed -n 3,5p westos     ##显示3到5行
sed -ne "3p;5p westos  ##显示3和5行
sed -ne 1,5p westos    ##1-5行
sed -ne '5,$p' westos  ##5到最后以行
sed -n '/^#/p' fstab   ##显示以#开头的

---

(2) d ## 删除

sed 5d westos               ##删除第五行
sed '/^#/d' fstab           ##把#开头的行删除
sed '/^UUID/!d' fstab       ##除了UUID以外的行都删除
sed -e '5,$d' westos        ##删除第五行到最后一行

---

（3） a ## 添加

sed -e '$a hello world' fstab
sed -e '$a hello\nworld' fstab
sed -e '/^#/a hello world' fstab

---

(4) c ## 替换

sed -e '/^#/c hello world' fstab
sed '5chello world' westos

(5) w ## 把符合的行写到指定文件中

sed '/^UUID/w westofile' westos     ##把westos中UUID开头的行写入westosfile中

---

（6） i ## 插入

sed ' /westos/iwestoslinux' westos    ##在westos上面一行插入westoslinux
                                      ##与a不同，a是在下面一行插入

---

(7) r ##整合

sed '2rlee' westos
sed '/hello/rlee' westos

---

(8) r ## 字符替换

sed 's/:/###/g' westos 
sed 's/:/###/' westos 
sed 's/:/###/g' westos 
sed '1,5s/:/###/g' westos 
sed '1s/:/###/g' westos 
sed '1s/:/###/g;5s/:/###/g' westos 
sed '/lp/,/shutdown/s/:/###/g' westos 
sed 's/\//####/g' westos 
sed 's@/@####@g' westos 

sed 's@/@####@g' -i westos     把sed处理的内容保存到westos文件中

---

---

3.awk

报告生成器

awk -F 分隔符 BEGIN{}{}END{} FILENAME
NR #行数
NF #列数
FILENAME #文件名称本身
westos #westos变量值
“westos” #westos字符串
/bash$/ #条件
/条件1|条件2/ #条件1或者条件2 /条件1/||/条件2/ #条件1或者条件2 /条件1/&&/条件2/ #条件1并且条件2 $0 #所有的列
$1 #第一列
$2 #第二列
$3 #第三列
#/etc/passwd文件的第六列没有home关键字并且以bash结尾的行
awk -F : '$6!~/home/&&/bash$/{print}' /etc/passwd

---