三剑客之grep

三剑客之grep         三剑客之sed         三剑客之awk

1 通配符

*：匹配所以字符。
{}：生成序列。
[]：[a-z]匹配一个小写字母；1个中括号相当于1个字符.
[^]：取反排除。
?：匹配任意一个字符。

1.找出当前目录下以.txt结尾的文件。
> ls *.txt

2.找出/etc/下面以.conf结尾的文件。
> find /etc -type f -name "*.conf"

3.找出/etc/下面包含co的文件。
> find /etc -type f -name "*co*"

4.从1开始，步长35，加到100为止。
> seq 1 35 100
1
36
71

5.从1开始，步长35，加到100为止。
> echo {1..100..35}
1 36 71

6.布拉布拉布拉
>echo {1..10}
1 2 3 4 5 6 7 8 9 10

7.布拉布拉布拉
>echo {01..10}
01 02 03 04 05 06 07 08 09 10

8.布拉布拉布拉
>echo liming{01..10}
liming01 liming02 liming03 liming04 liming05 liming06 liming07 liming08 liming09 liming10

9.布拉布拉布拉
>echo a.txt{,.bak}
a.txt a.txt.bak

10.布拉布拉布拉
>cp a.txt{,.bak}
>ls a.*
a.txt  a.txt.bak

11.查看文件内容时在行结尾添加 $ 符号
cat -A a.txt

2 单引号’'，双引号""，不加引号，反引号``

单引号''：所见即所得，单引号里的内容会被原封不动输出（大部分命令）。
双引号""：双引号里面的特殊符号会被解析运行；反引号``，$()，$
不加引号：与双引号类似，支持通配符。
反引号``：优先执行反引号里面的命令。

> echo 'michael $LANG `hostname` $(whoami) {1..4}'
michael $LANG `hostname` $(whoami) {1..4}

> echo "michael $LANG `hostname` $(whoami) {1..4}"
michael en_US.UTF-8 michael root {1..4}

> echo michael $LANG `hostname` $(whoami) {1..4}
michael en_US.UTF-8 michael root 1 2 3 4

> echo `michael $LANG hostname $(whoami) {1..4}`
报错-bash: michael: command not found

3 Regular Expression（RE）正则表达式

基础正则：^，$，^$，.，*，.*，[]，[^]   BRE Basic
扩展正则：|，+，{}，()，?                               ERE Extended

\   ：去除特殊含义。
\n ：回车换行。
\t ：制表符。

1.匹配空行
> grep ^$ a.txt
2.匹配空行
> grep '^$' a.txt
3.匹配空行，并显示行号
> grep -n ^$ a.txt
4.匹配空行，并显示行号
> grep -n '^$' a.txt

5.排除匹配空行，并显示行号；-v 反向匹配
> grep -v -n '^$' a.txt
> grep -vn '^$' a.txt

6.转义符 显示 与 转义
> echo 'michael \n michelle'
michael \n michelle
> echo -e 'michael \n michelle'
michael 
 michelle

7.匹配出 所有开头到a的内容
grep '^.*a' test.txt 

8.匹配出 所有包含a或b或c的行的内容
grep '[abc]' test.txt

8.匹配出所有包含a或b或c的行的内容（不区分大小写）
grep -i '[abc]' test.txt

8.匹配出所有包含a-z,A-Z,0-9的行的内容（不区分大小写）
grep -i '[a-zA-Z0-9]' test.txt

8.匹配出所有包含a-z,A-Z,0-9的行的内容（不区分大小写）[按每个匹配的列出]
  show only the part of a line matching PATTERN
grep -i -o '[a-zA-Z0-9]' test.txt

9.grep -E 同时匹配多个关键字（或关系）；
   匹配 file.txt 中包含 word1 或 word2 或 word3 的行。
   满足其中任意条件（word1、word2和word3之一）就会匹配。
grep -E "word1|word2|word3" test.txt

10.同时匹配多个关键字（与关系）；
   必须同时满足三个条件（word1、word2和word3）才匹配。
grep word1 test.txt | grep word2 |grep word3

11.保留表头（首行|标题）的解决方案；
# 第一种，通过正则表达式过滤【这种适合装逼】
## 适用：管道符 " | " 左侧的内容（如模板上的USER，在ps的输出中就是唯一属于标题的，其它进程几乎不会有这个关键词）必须唯一属于标题，这样才能起到捕捉标题的作用
## 缺点：要理解其中正则表达式的使用，会很舒服，不理解，就经常忘记
ps auxw | grep -E "^USER|内容"
ps auxw | grep -E "^USER|ssh"

# 第二种，通过组合shell语句实现【这种适合实在人】
## 适用：输出内容只有一个标题，且在首行（标题应该没有不在首行的吧）
## 缺点：严格来说，这种方法灵活性不够
ps auxw | head -1;ps auxw | grep "内容"
ps auxw | head -1;ps auxw | grep "ssh"

4 grep

> grep "root" /etc/passwd
root:x:0:0:root:/root:/bin/bash
operator:x:11:0:operator:/root:/sbin/nologin

> grep --color "root" /etc/passwd
root:x:0:0:root:/root:/bin/bash
operator:x:11:0:operator:/root:/sbin/nologin

> grep -n --color "root" /etc/passwd
1:root:x:0:0:root:/root:/bin/bash
10:operator:x:11:0:operator:/root:/sbin/nologin

> grep -n --color "^root" /etc/passwd
1:root:x:0:0:root:/root:/bin/bash

> grep -n --color "bash$" /etc/passwd
1:root:x:0:0:root:/root:/bin/bash

> grep -v "#" /etc/e2fsck.conf | grep -v "^$"
[options]
broken_system_clock = 1

5 egrep

egrep = grep -E

6 我用过的命令选项

grep -A 5 可以显示匹配内容以及后面的5行内容
grep -B 5 可以显示匹配内容以及前面的5行内容
grep -C 5 可以显示匹配内容以及前后面的5行内容
grep --text