sed
1. 能够实现grep 的功能
2 没有颜色显示
3. 实现一些grep没有的高级功能
sed 的命令格式是: sed -n 'n' p filename 单引号中的n是一个数字,表示第几行。
-n 的作用是只显示我们要打印的行。
加上-nr 表示匹配的意思。
打印出全部内容:
匹配多种条件打印出行。
删除操作 d. 并没有删除文件,仅仅是在屏幕当中,把行隐藏
sed -i '1,25'd test.txt 把前25行删除掉
针对性的去删除行中的字符
sed -i '/user2/'d test.txt
交换字符串的位置:把字符串分成三段,首段和尾端搞成非字符串字段。中间也有很多字段搞成(。*)来代替。然后交换位置。数字代表位置的顺序。注意括号区,要用/ / 括起来。
两种更换方法:加反斜杠和加@字符
删除一个范围。
AWK:格式 ‘条件类型1 {动作1} 条件类型2 {动作2}...’ filename
指定分隔符为 : ,把test.txt 第一段打印出来。
打印所有的字段、awk -F ':' '{print $0}' text.txt
打印多个字段 :
打印包含 00 的行:
第一段带OO 的字符。
条件操作符 :可以是表达式 == 就是等于,理解为精确匹配
IF 条件判断语句
awk 常用的变量有OFS,NF和NR。 NF表示用分隔符分隔后一共有多少段,NR表示行号。
循环语句:循环添加第三段的值。
课堂笔记:
awk语法结构:
awk -F ':' 'BEGIN{语句} {if(条件){语句1;语句2;语句3} } END{语句}' filename
打印某行到某行之间的内容
sed -n '/tss/,/sas/p' /etc/passwd
sed转换大小写
1. 把每个单词的第一个小写字母变大写:
sed 's/\b[a-z]/\u&/g' filename
2. 把所有小写变大写:
sed 's/[a-z]/\u&/g' filename
3. 大写变小写:
sed 's/[A-Z]/\l&/g' filename
sed在某一行最后添加一个数字
sed -r 's/(^a.*)/\1 12/' test
sed -r 's/^a.*/& 12/' test
打印1到100行含某个字符串的行
sed -n '1,100{/abc/p}' 1.txt
awk 中使用外部shell变量
a=2; echo "a:b:c:d"|awk -F ":" -v get_a=$a '{print $get_a}'
awk 合并一个文件
awk 'NR==FNR {a[$1]=$2} NR>FNR {print $0,a[$1]}' 1.txt 2.txt
说明:
awk '{print NR,FNR}' 1.txt 2.txt //首先理解NR和FNR的不同(awk支持同时操作多个文件内容)
当NR==FNR其实就是第一个文件的内容
当NR>FNR,其实就是第二个文件的内容
把一个文件多行连接成一行
方法一:
a=`cat file`;echo $a
方法二:
awk '{printf("%s ",$0)}' file
方法三:
cat file |xargs
awk中gsub函数的使用
awk 'gsub(/www/,"abc")' /etc/passwd // passwd文件中把所有www替换为abc
awk -F ':' 'gsub(/www/,"abc",$1) {print $0}' /etc/passwd // 替换$1中的www为abc
awk 截取指定多个域为一行
用awk指定分隔符把文本分为若干段。如何把相同段的内容弄到一行?
以/etc/passwd为例,该文件以":"作为分隔符,分为了7段。
for i in `seq 1 7`
do
awk -F ':' -v a=$i '{printf $a " "}' /etc/passwd
echo
done
过滤两个或多个关键词
grep -E '123|abc' filename // 找出文件(filename)中包含123或者包含abc的行
egrep '123|abc' filename //用egrep同样可以实现
awk '/123|abc/' filename // awk 的实现方式
awk用print打印单引号
awk 'BEGIN{print "a'"'"'s"}'
awk 'BEGIN{print "a'\''s"}'
awk 'BEGIN{print "a\"s"}'