Linux 之 sed 命令初步学习

Sed 是一种在线编辑器，它一次处理一行内容，处理时，把当前处理的行存储在临时缓冲区
称为模式空间 pattern space 接着用sed命令处理缓冲区中的内容，处理完成后，把缓冲区的内容送往屏幕。接着处理下一行，这样不断重复，直到文件末尾。文件内容并没有 改变，除非使用重定向存储输出。Sed主要用来自动编辑一个或多个文件；简化对文件的反复操作；编写转换程序等
-----------------------------------------------------------------------------------------------------------------------------------------------------------------------------------
[root@www ~]# sed [-nefr] [动作]
选项与参数：
-n ：使用安静(silent)模式。在一般 sed 的用法中，所有来自 STDIN 的数据一般都会被列出到终端上。但如果加上 -n 参数后，则只有经过sed 特殊处理的那一行(或者动作)才会被列出来。
-e ：直接在命令列模式上进行 sed 的动作编辑；
-f ：直接将 sed 的动作写在一个文件内， -f filename 则可以运行 filename 内的 sed 动作；
-r ：sed 的动作支持的是延伸型正规表示法的语法。(默认是基础正规表示法语法)
-i ：直接修改读取的文件内容，而不是输出到终端。
----------------------------------------------------------------------------------------------------------------------------------------------------------------------------------
动作说明： [n1[,n2]]function
n1, n2 ：不见得会存在，一般代表『选择进行动作的行数』，举例来说，如果我的动作是需要在 10 到 20 行之间进行的，则『 10,20[动作行为] 』
----------------------------------------------------------------------------------------------------------------------------------------------------------------------------------
function：
a ：新增， a 的后面可以接字串，而这些字串会在新的一行出现(目前的下一行)～ add
c ：取代， c 的后面可以接字串，这些字串可以取代 n1,n2 之间的行！
d ：删除，因为是删除啊，所以 d 后面通常不接任何咚咚；
i ：插入， i 的后面可以接字串，而这些字串会在新的一行出现(目前的上一行)；
p ：列印，亦即将某个选择的数据印出。通常 p 会与参数 sed -n 一起运行～
s ：取代，可以直接进行取代的工作哩！通常这个 s 的动作可以搭配正规表示法！例如 1,20s/old/new/g 
将 /etc/passwd 的内容列出并且列印行号，同时，请将第 2~5 行删除！
[root@www ~]# nl /etc/passwd | sed '2,5d'
1 root:x:0:0:root:/root:/bin/bash
6 sync:x:5:0:sync:/sbin:/bin/sync
7 shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown只要删除第 2 行nl /etc/passwd | sed '2d' 要删除第 3 到最后一行 nl /etc/passwd | sed '3,$d' 在第二行后(亦即是加在第三行)加上『drink tea』
[root@www ~]# nl /etc/passwd | sed '2a drink tea'那如果是要在第二行前 nl /etc/passwd | sed '2i drink tea' 
以行为单位的替换与显示
将第2-5行的内容取代成为『No 2-5 number』呢
[root@www ~]# nl /etc/passwd | sed '2,5c No 2-5 number'
仅列出 /etc/passwd 文件内的第 5-7 行
[root@www ~]# nl /etc/passwd | sed -n '5,7p'
数据的搜寻并显示
 [root@fonsview otp]# nl /etc/profile | sed -n  '/export/p'
    41	 export HISTCONTROL=ignoreboth
    43	 export HISTCONTROL=ignoredups
 [root@fonsview otp]#  sed -n  '/export/p' /etc/profile
 export HISTCONTROL=ignoreboth
 export HISTCONTROL=ignoredups
数据的搜寻并删除 删除 /etc/passwd 所有包含root 的行nl /etc/passwd | sed  ‘/root/d’
找到匹配模式eastern的行后，搜索/etc/passwd,找到root对应的行，执行后面花括号中的一组命令，每个命令之间用分号分隔，这里把bash替换为blueshell，再输出这行：nl /etc/passwd | sed -n '/root/{s/bash/blueshell/;p}'如果只替换/etc/passwd的第一个bash关键字为blueshell，就退出nl /etc/passwd | sed -n '/bash/{s/bash/blueshell/;p;q}' 
数据的搜寻并替换 sed 's/要被取代的字串/新的字串/g'
先观察原始信息，利用 /sbin/ifconfig 查询 IP
[root@www ~]# /sbin/ifconfig eth0
eth0 Link encap:Ethernet HWaddr 00:90:CC:A6:34:84
inet addr:192.168.1.100 Bcast:192.168.1.255 Mask:255.255.255.0
inet6 addr: fe80::290:ccff:fea6:3484/64 Scope:Link
UP BROADCAST RUNNING MULTICAST MTU:1500 Metric:1
将 IP 前面的部分予以删除
[root@www ~]# /sbin/ifconfig eth0 | grep 'inet addr' | sed 's/^.*addr://g'
192.168.1.100 Bcast:192.168.1.255 Mask:255.255.255.0
接下来则是删除后续的部分，亦即： 192.168.1.100 Bcast:192.168.1.255 Mask:255.255.255.0 将 IP 后面的部分予以删除[root@www ~]# /sbin/ifconfig eth0 | grep 'inet addr' | sed 's/^.*addr://g' | sed 's/Bcast.*$//g'          192.168.1.100
多点编辑一条sed命令，删除/etc/passwd第三行到末尾的数据，并把bash替换为                               blueshellnl /etc/passwd | sed -e '3,$d' -e 's/bash/blueshell/'                                                                                            -e表示多点编辑，第一个编辑命令删除/etc/passwd第三行到末尾的数据，第二条命令搜索bash替换为blueshell。
可以直接修改文件 sed 可以直接修改文件的内容，不必使用管道命令或数据流重导向
利用 sed 将 regular_express.txt 内每一行结尾若为 . 则换成 !
[root@www ~]# sed -i 's/\.$/\!/g' regular_express.txt
利用 sed 直接在 regular_express.txt 最后一行加入『# This is a test』
[root@www ~]# sed -i '$a # This is a test' regular_express.txt  因为 $ 代表的是最后一行，而 a 的动作是新增，因此该文件最后新增『# This is a test』！sed 的『 -i 』选项可以直接修改文件内容，这功能非常有帮助！举例来说，如果有一个 100 万行的文件，要在第 100 行加某些文字，此时使用 vim 可能会疯掉！因为文件太大了！那怎办？就利用 sed 啊！透过 sed 直接修改/取代的功能，甚至不需要使用 vim 去修订！

http://www.zsythink.net/archives/1336   [学习资源]   http://blog.chinaunix.net/uid-23302288-id-3785105.html
sort   uniq  cut  wc  ++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++
grep  sed  awk 被称为linux 三剑客
grep 适合单纯的查找或匹配文本
sed 适合编辑匹配到的文本
awk 适合格式化文本 对文本进行复杂格式化处理
C:\Users\Administrator>ipconfig | find "IPv4" > ipaddress.txt
-----------------------------------------------------------------------------------------------------------------------------------------------------------------------------------
<span>3.0.0.${prefix.revision}</span>
echo `cat fums/about.html|grep '<span>'|cut -d '>' -f 2|cut -d '<' -f 1|head -1|tail -1`
war=`ls fums-*-*.war`
temp=`unzip -d fums $war about.html`
echo `cat fums/about.html|grep '<span>'|cut -d '>' -f 2|cut -d '<' -f 1|head -1|tail -1`

cut命令提供了这样的提取方式，具体的说就是设置“间隔符”，再设置“提取第几个域”，就OK了！以/etc/passwd的前五行内容为例：[rocrocket@rocrocket programming]$ cat /etc/passwd|head -n 5
root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
[rocrocket@rocrocket programming]$ cat /etc/passwd|head -n 5|cut -d : -f 1
root
bin
用-d来设置间隔符为冒号，然后用-f来设置我要取的是第一个域，再按回车，所有的用户名就都列出来了   帮助文档[https://www.cnblogs.com/dong008259/archive/2011/12/09/2282679.html]
head命令是用来查看具体文件的前面几行的内容，具体格式如下：head <filename>:可以通过head命令查看具体文件最初的几行内容，该命令默认是前10行内容，如果想查看前面更多内容，可以通过一个数字选项来设置，head -20 install.log通过上面命令可以查看install.log这个文件前面20行的内容与head命令相反，tail命令是用来查看具体文件后面几行的内容，默认情况下，是查看该文件尾10行的内容，同样，如果想查看后面更多内容，也是通过数字选项来设置，例如tail -20 install.log还可以使用 tail 来观察日志文件被更新的过程。使用 -f 选项，tail 会自动实时地把打开文件中的新消息显示到屏幕上。例如，要即时观察 /var/log/messages的变化，以根用户身份在 shell 提示
下键入以下命令：tail -f /var/log/messages
delimeter  --  [计] 定界符; [http://blog.csdn.net/songyang516/article/details/6758256]

1.1      重定向符号
>  输出重定向到一个文件或设备 覆盖原来的文件
>!  输出重定向到一个文件或设备 强制覆盖原来的文件
>>  输出重定向到一个文件或设备 追加原来的文件
<  输入重定向到一个程序 
1.2标准错误重定向符号
2>   将一个标准错误输出重定向到一个文件或设备 覆盖原来的文件  b-shell
2>>  将一个标准错误输出重定向到一个文件或设备 追加到原来的文件
2>&1 将一个标准错误输出重定向到标准输出 注释:1 可能就是代表 标准输出
>&  将一个标准错误输出重定向到一个文件或设备 覆盖原来的文件  c-shell
|&  将一个标准错误 管道 输送 到另一个命令作为输入
1.3命令重导向示例
在 bash 命令执行的过程中，主要有三种输出入的状况，分别是：
1. 标准输入；代码为 0 ；或称为 stdin ；使用的方式为 <
2. 标准输出：代码为 1 ；或称为 stdout；使用的方式为 1>
3. 错误输出：代码为 2 ；或称为 stderr；使用的方式为 2>
[test @test test]# ls -al > list.txt
将显示的结果输出到 list.txt 文件中，若该文件以存在则予以取代！
[test @test test]# ls -al >> list.txt
将显示的结果累加到 list.txt 文件中，该文件为累加的，旧数据保留！
[test @test test]# ls -al  1> list.txt   2> list.err
将显示的数据，正确的输出到 list.txt 错误的数据输出到 list.err
[test @test test]# ls -al 1> list.txt 2> &1
将显示的数据，不论正确或错误均输出到 list.txt 当中！错误与正确文件输出到同一个文件中，则必须以上面的方法来写！不能写成其它格式！
[test @test test]# ls -al 1> list.txt 2> /dev/null
将显示的数据，正确的输出到 list.txt 错误的数据则予以丢弃！ /dev/null ，可以说成是黑洞装置。为空，即不保存。