文本处理三剑客之sed编辑器和awk

一、sed编辑器

grep、sed、awk是文本处理三剑客

sed是一种流编辑器，流编辑器会在编辑器处理数据之前基于预先提供的一组规则来编辑数据流。
sed编辑器可以根据命令来处理数据流中的数据，这些命令要么从命令行中输入，要么存储在一个命令文本文件中。

sed 的工作流程及命令格式

sed 的工作流程主要包括读取、执行和显示三个过程:
●读取:sed从输入流(文件、管道、标准输入)中读取一行内容并存储到临时的缓冲区中(又称模式空间，pattern space)
●执行:默认情况下，所有的sed命令都在模式空间中顺序地执行，除非指定了行的地址，否则sed命令将会在所有的行上依次执行。
●显示:发送修改后的内容到输出流。在发送数据后，模式空间将会被清空。在所有的文件内容都被处理完成之前，.上述过程将重复执行，直至所有内容被处理完。

在所有的文件内容都被处理完成之前，上述过程将重复执行，直至所有内容被处理完。
注意:默认情况下所有的sed命令都是在模式空间内执行的，因此输入的文件并不会发生任何变化，除非是用重定向存储输出。

命令格式:
sed -e ‘操作’ 文件1 文件2
sed -n -e ‘操作’ 文件1 文件2
sed -f 脚本文件 文件1 文件2 …
sed -i -e ‘操作’ 文件1 文件2 …

sed -e 'n{
操作1
操作2
}'文件1文件2 …

常用选项:
-e或–expression=:表示用指定命令来处理输入的文本文件，只有一个操作命令时可省略，一般在执行多个操作命令使用
-f或- -file=:表示用指定的脚本文件来处理输入的文本文件。
-h或–help:显示帮助。
-n、- -quiet或silent:禁止sed编辑器输出，但可以与p命令一起使用完成输出。
-i:直接修改目标文本文件。

常用操作:
s:替换，替换指定字符。
d: 删除，删除选定的行。
a:增加，在当前行下面增加一行指定内容。
i:插入，在选定行上面插入一zai行指定内容。
c:替换，将选定行替换为指定内容。
y:字符转换，转换前后的字符长度必须相同。
p:打印，如果同时指定行，表示打印指定行;如果不指定行，则表示打印所有内容;如果有非打印字符，则以ASCII码输出。其通常与“-n”选项一起使用。
=:打印行号。
l (小写L):打印数据流中的文本和不可打印的ASCII字符(比如结束符$、制表符\t)

打印内容:

打印内容:
sed -n -e 'p' testfile1
sed -n -e '=' testfile1
sed -n -e 'l' testfile1
sed -n -e '!=;p' testfile1
sed -n -e '=' -e 'p' testfile1

sed -n '
>=
>p
> ' testfile1

sed -n -e ‘p’ testfile1 　　　　　 #打印出testfile1的内容，一般只有一个操作命令时可省略-e

sed -n -e ‘=’ testfile1　　　　　＃打印出testfile１的内容的行号

sed -n -e ‘l’ testfile1　　　　 #打印数据流中的文本和不可打印的ASCII字符(比如结束符$、制表符\t)

sed -n -e ‘=’ -e ‘p’ testfile1 　　　　　＃输出testfile１的行号和内容
sed -n -e ‘!=;p’ testfile1 　　　　　　＃不输出行号，至输出内容

使用地址:

sed编辑器有2种寻址方式:
1、以数字形式表示行区间
2、用文本模式来过滤出行

sed -n '1p' testfile1			   	 #打印第一行
sed -n '$p' testfile1				 #打印最后一行
sed -n '1,3p' testfile1				 #打印1-3行
sed -n '3, $p' testfile1			 #打印3至最后一行
sed -n '1, +3p' testfile1        	 #打印1之后的连续3行，即1-4行
sed '5q' testfile1 		       		 #打印前5行信息后退出，q表示退出
sed -n 'p;n' testfile1				 #打印奇数行; n表示移动到下一行
sed -n 'n;p' testfile1				 #打印偶数行
sed -n '2,${n;p}' testfile1			 #打印从3开始的奇数行

sed -n '/user/p' /etc/passwd		 #打印/etc/passwd中含有user的行
sed -n <