linux/sed awk

awk是一个强大的文本分析工具，awk在其对数据分析并生成报告时，显得尤为强大。简单来说awk就是把文件逐行的读入，以空格为默认分隔符将每行切片，切开的部分再进行各种分析处理。
awk [-F field-separator] ‘commands’ input-file(s)
假设你有一个名为 data.txt 的文件，其中包含员工的姓名、薪资和小时数，一个员工一行数据，如下所示：
Beth 4.00 0
Dan 3.75 0
kathy 4.00 10
Mark 5.00 20
Mary 5.50 22
Susie 4.25 18
现在你想打印出工作时间超过零小时的员工的姓名和工资（薪资乘以时间）。这种任务对于awk来说就是小菜一碟。输入这个命令行就可以了
awk -F ’ ’ ‘$3>0 {print $1,$2*$3}’ data.txt

===================

sed是一个很好的文件处理工具，可以将数据行进行替换、删除、新增、选取等特定工作。
sed [-nefri] ‘command’ 输入文本
常用选项：
-n∶加上 -n 参数后，则只有经过sed 特殊处理的那一行(或者动作)才会被列出来。

常用命令：
a ∶新增， 在某一行后面append
c ∶取代， 取代某一行或几行
d ∶删除，
i ∶插入，
p ∶列印，亦即将某个选择的资料印出。通常 p 会与参数 sed -n 一起
s ∶取代，可以直接进行取代的工作,’s/……/g’

======对文件的操作，源文件不改变======
（1）d 删除
例如ab为文件名，不加-n返回全部文件内容
sed ‘1d’ ab #删除第一行
sed ‘$d’ ab #删除最后一行
sed ‘1,2d’ ab #删除第一行到第二行
sed ‘2,$d’ ab #删除第二行到最后一行

（2）p显示
但如果加上 -n 参数后，则只有经过sed 特殊处理的那一行被线束出来。
sed -n ‘1p’ ab #显示第一行
sed -n ‘$p’ ab #显示最后一行
sed -n ‘1,2p’ ab #显示第一行到第二行
sed -n ‘2,$p’ ab #显示第二行到最后一行

使用模式进行查询
sed -n ‘/hello/p’ ab #查询文件中hello关键字所有行
sed -n ‘/$/p’ ab #查询文件中关键字$的所有行

（3）a添加
sed ‘1a drink tea’ ab #第一行后增加字符串”drink tea”
sed ‘1,3a hello’ ab #第一至三行后面添加字符串hello
sed ‘1a hello\npeace’ ab #在第一行后面添加多行字符串

（4）c替换
sed ‘1,2c Hi’ ab #第一行到第二行代替为Hi

（5） ‘s/……/g’替换某些内容
替换文本内容：sed ‘s/要替换的字符串/新的字符串/g’
sed -n ‘/ruby/p’ ab | sed ‘s/ruby/bird/g’ #替换ruby为bird
sed -n ‘/ruby/p’ ab | sed ‘s/ruby//g’ #删除ruby

======对文件的操作，源文件改变======
（i）插入
sed -i ‘$a bye’ ab #最后一行插入字符串bye