文本三剑客 sed awk

目录

sed

sed编辑器

sed的原理

面试题

sed 的实际操作

格式

行号范围区间打印

文本过滤模式

扩展正则表达式

查

删

替换

增加

总结

awk

用法

命令格式

awk常用的内置变量

awk 的打印功能

奇偶打印

awk运算

awk文本内容过滤

BEGIN模式

面试题

-v 变量赋值

RS指定分割符

awk 条件判断打印

if条件判断

三元表达式

awk的精确筛选

面试题

实验

---

grep sed awk 文本三剑客都是针对文件内容的行来进行处理

sed

sed编辑器

sed :类似于vim 就是文本编辑器，按行来编辑处理
sed的主要作用就是对文本内容的增删改查
sed可以支持正则表达式，支持扩展正则表达式

sed的原理

读取，执行命令，显示三个过程
读取：读取文本内容之后，读取到的内容存放到临时的缓冲区，模式空间
执行：在模式空间，根据读取的文本内容，按行执行，除非指定行号，否则会遍历所有行。依次执行，从上往下执行
显示：执行完之后，把执行结果打印，如果改变生效，模式空间被修改的内容会写入指定的文件当中。只是操作，但是不最终写入文件，
只展示结果，展示完之后，模式空间的数据会立即删除。

面试题

sed文本内容处理
文件过大
split -l
cat 文件名 |sed处理     ---中型文件  大型文件还是先分割
怎么样不进入文件就可以删除文件内容，免交互删除

sed -i 'd' flie.txt
cat /dev/null >flie.txt

sed 的实际操作

格式

sed -e '操作'  文件1   -e '操作' 文件2

常用选项
-e 条件操作选项
-f  指定脚本文件来处理输入的文件内容，把命令写在脚本里，用脚本里的命令来处理第二个文件内容。
-i 立即生效
-n 显示script 处理之后的结果   禁止sed 的默认输出

操作符
s ：替换 替换指定字符
d：删除，删除指定的行
a :增加，在当前行的下面插入执行内容
i ：增加，在指定行的上面插入执行内容
c:替换  替换整行
y：替换字符，但是有个条件替换前后的字符长度必须一致
p：打印
r：扩展正则
= ：显示行号
sed 的核心就是改，删，增，查没有grep强大
-n 禁止sed 的默认输出

行号范围区间打印

， 到
； 和

文本过滤模式

第一：对包含指定字符串的内容进行打印
sed -n '/123/p' file.txt #所有包含123的行，都会打印
应用基础正则表达式进行打印
sed -n '/bash$/p' /etc/passwd#在etc/passwd 中查找bash为结尾

扩展正则表达式

查

sed -r -n '/(99:){2}/p' /etc/passwd
sed -r -n '/(^roor)|(bash$)/p' /etc/passwd 

删

sed -i 'd' flie.txt
cat /dev/null >flie.txt

指定行号进行删除
sed -n '3d;p' flie.txt
sed -n '1,3d;p' flie.txt 删除1-3行
sed -n '1d;3d;p' flie.txt 删除1和3行

匹配字符串删除
sed '/chen/d' flie.txt

取反删除
'/chen/!d'