linux菜鸟入门之文本处理小工具sed

   

文本处理

为了更好的处理文本必须掌握一些文本处理的小工具，这样才可以更高效的工作，文本处理3剑客grep，sed，awk。grep很简单，没有什么好说的了，sed和awk就比较难了，我刚开始学的时候根本不理解为什么要学sed和awk，学这个有什么意义。后来才发现，其实这很重要，比如我想写一个监控磁盘的脚本，那么一下子就想到了free这个命令了。于是运行free，发现有些是我想要的，有些却不是我想要的参数，比如，swap我就不想看到，我只想看到总共有多少，用了多少，还剩多少，这就得看awk的了，awk的功能十分强大，是以后脚本的好帮手。

先了解一下sed吧

     sed是Strem Editor 的缩写。就是流编辑器的缩写。是一个行编辑器。是逐行编译的。还有vim（全屏编辑器）。

但他默认是不编辑原文的，当然加一个 -i 选项就可以编辑原文了。

sed ‘Adress Command’ file ...

1./pattern1/,/pattern2/

第一次被pattern1匹配的行开始，到被pattern2匹配的行结束。

2.LineNumber

指定的行（$表示最后一行）

3.command

        d  删除

        s  替换

        g  全文

        p  打印

做一个小例子吧

[root@localhost test_xuexi]# cat test
a
b
abc
aaab
aaaabcd

[root@localhost test_xuexi]# sed '1,2d' test 
abc
aaab
aaaabcd

[root@localhost test_xuexi]# sed '/a..b/d' test 
a
b
abc

[root@localhost test_xuexi]# sed '1,+2d' test 
aaab
aaaabcd

[root@localhost test_xuexi]# 

-n 只打印符合条件的行（因为sed会打印出符合条件的行和原全文）

a \”string“: 在指定的行后面追加一行，内容是“string”

i  \"string"; 在指定的行前面添加一行，内容是”string“

r FILE ： 将制定的文件的内添加至符合条件的行后面

[root@localhost test_xuexi]# sed '2r /etc/issue' /etc/fstab

#
\S
Kernel \r on an \m

# /etc/fstab
# Created by anaconda on Tue Sep 20 07:56:24 2016
#
# Accessible filesystems, by reference, are maintained under '/dev/disk'
# See man pages fstab(5), findfs(8), mount(8) and/or blkid(8) for more info
#
UUID=f35003eb-898a-4681-8342-f8f6de03e541 /                       xfs     defaults        0 0
UUID=e19602a8-407c-414d-b38f-83f14718477a /boot                   xfs     defaults        0 0
UUID=cfd32983-7e1e-4d7d-ae3e-1e38dfc17616 swap                    swap    defaults        0 0

w FILE ;将符合条件的行保存至某个文件 。这个文件是放到了/tmp 下的。

s/pattern/string/g    查找并替换字符  g代表全文 i表示忽略大小写。

[root@localhost tmp]# tail -n 3 /etc/passwd
zxx:x:1001:1001:zxx,2+2lib,029-1910,029-1910:/home/zzx:/bin/bash
liuy:x:1002:1003::/home/liuy:/bin/bash
apache:x:48:48:Apache:/usr/share/httpd:/sbin/nologin
[root@localhost tmp]# tail -n 3 /etc/passwd|sed 's/\/bin\/bash/\/bin\/sh/g'
zxx:x:1001:1001:zxx,2+2lib,029-1910,029-1910:/home/zzx:/bin/sh
liuy:x:1002:1003::/home/liuy:/bin/sh
apache:x:48:48:Apache:/usr/share/httpd:/sbin/nologin

这里完全可以使用正则表达式

[root@localhost test_xuexi]# cat test 
a
b
abc
aaab
aaaabcd

[root@localhost test_xuexi]# sed 's/\(abc\)/\1def/g'
^C
[root@localhost test_xuexi]# sed 's/\(abc\)/\1def/g' test 
a
b
abcdef
aaab
aaaabcdefd

[root@localhost test_xuexi]# cat test 
My love
[root@localhost test_xuexi]# sed 's/l\(..e\)/L\1/g' test 
My Love

-e 选项：sed 支持多个操作

-f 选项：支持脚本 ，命令在脚本里面。

-r选项;  选择扩展的正则表达式

再做一个小练习吧，将history的命令输出值的空白全删了

[root@localhost test_xuexi]# history |sed 's/ //g'
264rmlines
265clear
266ls

取出一个文件路径的目录名称。

[root@localhost test_xuexi]# pwd
/root/test_xuexi
[root@localhost test_xuexi]# pwd|sed -r 's#^(/.*/)[^/]*#\1#g'
/root/
[root@localhost test_xuexi]#