linux文本处理三剑客

一、 grep（文本过滤工具）

常用参数

-v: 显示不能够被匹配到的行
-i: 忽略大小写字符
-o: 仅显示匹配到的字符串
-q: 静默模式，不输出任何信息
-A #: 后#行
-B #: 前#行
-C #: 前后各#行
-E: 使用ERE，相当于egrep

二、sed（文本流编辑）

常用参数

-n: 只打印模式匹配的行
-e: 直接在命令行模式上进行sed动作编辑，此为默认选项
-f: 将sed的动作写在一个文件内，用-f filename执行filename内的sed动作
-r: 支持扩展表达式
-i: 直接修改文件内容

地址定界

x: 行号
x,y: 从x行到y行
x,y!: x行到y行之外
/pattern: 查询包含模式的行
/pattern/,/pattern/: 查询包含两个模式的行
/pattern/,x: x行内查询包含模式的行
x,/pattern/: x行后查询包含模式的行

编辑命令

p: 打印匹配的行（与-n类似）
=: 显示文件行号
a\: 指定行后添加新文本
i\: 指定行号前添加新文本
d: 删除指定行
c\:用新文本替换定位文本
w filename: 写文本到一个文件
r filename: 从另一个文件读文本
s///:
	g: 行内全局替换
	p: 显示替换成功的行
	w: 将替换成功的结果保存至指定文件中
q: 第一个模式匹配后立即退出	

三、awk（文本分析工具）

常用参数

-F fs: 指定文件分隔符，fs是一个字符串或者是一个正则表达式，如-F : 。
-v var = value: 赋值一个用户定义变量
-f scripfile: 从脚本中读取awk命令

用法一

[root@server ~]# awk '{print $1,$2}' test.txt 
2 this
3 Are
This's a
10 There
[root@server ~]# 

用法二 指定分隔符

[root@server ~]# awk -F, '{print $1,$2}' test.txt 
2 this is a test 
3 Are you like awk 
This's a test 
10 There are orange apple
[root@server ~]# 

用法三 用户自定义变量

[root@server ~]# awk -va=1 -vb=s '{print $1,$1+a,$1b}' test.txt
2 3 2s
3 4 3s
This's 1 This'ss
10 11 10s
[root@server ~]#