shell脚本中打印所有匹配某些关键字符的行或前后各N行

最新推荐文章于 2022-08-10 17:40:07 发布
最新推荐文章于 2022-08-10 17:40:07 发布
阅读量2.9k 收藏 7
点赞数 2
文章标签： shell awk 运维

 

在日常运维中，经常需要监控某个进程，并打印某个进程的监控结果，通常需要打印匹配某个结果的行以及其前后各N行。

注意：echo使用-e参数，对打印的结果中进行\n换行

[root@mq-master02 ~]# echo "abcd"
abcd
[root@mq-master02 ~]# echo "ab\ncd"
ab\ncd
[root@mq-master02 ~]# echo "ab \n cd"
ab \n cd
[root@mq-master02 ~]# echo -e "ab\ncd"
ab
cd
[root@mq-master02 ~]# echo -e "ab \n cd"
ab 
 cd
[root@mq-master02 ~]# echo -e "ab \n cd \n \n df"
ab 
 cd 
 
 df
 [root@mq-master02 ~]# echo -e "ab\ncd \n \ndf"   
ab
cd 
 
df

1）案例一

[root@mq-master02 ~]# cat /opt/test 
192.168.10.11
Don't worry! main is running!
192.168.10.12
Don't worry! main is running!
192.168.10.13
It's so bad! main is failed!
192.168.10.14
Don't worry! main is running!
192.168.10.15
Don't worry! main is running!
192.168.10.16
It's so bad! main is failed!
192.168.10.17
Don't worry! main is running!
192.168.10.18
Don't worry! main is running!
192.168.10.19
Don't worry! main is running!
192.168.10.20
Don't worry! main is running!
192.168.10.21
Don't worry! main is running!
192.168.10.12
Don't worry! main is running!

1）打印/opt/test中所有匹配"main is failed"的行
[root@mq-master02 ~]# cat /opt/test |grep "main is failed"
It's so bad! main is failed!
It's so bad! main is failed!
[root@mq-master02 ~]# sed -n '/main is failed/p' /opt/test
It's so bad! main is failed!
It's so bad! main is failed!

2）打印/opt/test中所有匹配"main is failed"的行及其前1行
[root@mq-master02 ~]# cat /opt/test |grep "main is failed" -B1   
192.168.10.13
It's so bad! main is failed!
--
192.168.10.16
It's so bad! main is failed!

3）打印/opt/test中所有匹配"main is failed"的行及其后1行
[root@mq-master02 ~]# cat /opt/test |grep "main is failed" -A1
It's so bad! main is failed!
192.168.10.14
--
It's so bad! main is failed!
192.168.10.17

4）打印/opt/test中所有匹配"main is failed"的行及其前后各1行
[root@mq-master02 ~]# cat /opt/test |grep "main is failed" -C1
192.168.10.13
It's so bad! main is failed!
192.168.10.14
--
192.168.10.16
It's so bad! main is failed!
192.168.10.17

5）把/opt/test中所有匹配"main is failed"的行及其前1行的结果打印到/root/result.log中，并加上时间
[root@mq-master02 ~]# echo -e "$(date)\n$(cat /opt/test|grep "main is failed" -B1)"> /root/result.log 
[root@mq-master02 ~]# cat /root/result.log
Wed Oct 10 20:34:15 CST 2018
192.168.10.13
It's so bad! main is failed!
--
192.168.10.16
It's so bad! main is failed!

[root@mq-master02 ~]# echo -e "$(date)\n$(cat /opt/test|grep "main is failed" -B1) \n" > /root/result.log
[root@mq-master02 ~]# echo -e "$(date)\n$(cat /opt/test|grep "main is failed" -B1) \n" >> /root/result.log
[root@mq-master02 ~]# echo -e "$(date)\n$(cat /opt/test|grep "main is failed" -B1) \n" >> /root/result.log
[root@mq-master02 ~]# cat /root/result.log
Wed Oct 10 20:35:27 CST 2018
192.168.10.13
It's so bad! main is failed!
--
192.168.10.16
It's so bad! main is failed! 

Wed Oct 10 20:35:29 CST 2018
192.168.10.13
It's so bad! main is failed!
--
192.168.10.16
It's so bad! main is failed! 

Wed Oct 10 20:35:29 CST 2018
192.168.10.13
It's so bad! main is failed!
--
192.168.10.16
It's so bad! main is failed! 

[root@mq-master02 ~]# echo -e "$(date +%Y年%m月%d日) $(date +%A) $(date +%H时%M分%S秒)\n$(echo "今天是个好日子啊") \n" > /root/result.log
You have new mail in /var/spool/mail/root
[root@mq-master02 ~]# echo -e "$(date +%Y年%m月%d日) $(date +%A) $(date +%H时%M分%S秒)\n$(echo "今天是个好日子啊") \n" >> /root/result.log
[root@mq-master02 ~]# echo -e "$(date +%Y年%m月%d日) $(date +%A) $(date +%H时%M分%S秒)\n$(echo "今天是个好日子啊") \n" >> /root/result.log
[root@mq-master02 ~]# cat /root/result.log
2018年10月10日 Wednesday 20时36分49秒
今天是个好日子啊 

2018年10月10日 Wednesday 20时36分52秒
今天是个好日子啊 

2018年10月10日 Wednesday 20时36分54秒
今天是个好日子啊

2）示例二

ip列表文件
[root@kevin ~]# cat /opt/ip.list
192.168.10.11 
192.168.10.12   
192.168.10.13   
192.168.10.14 
192.168.10.15
192.168.10.16
192.168.10.17
 
 
main进程状态的检查脚本：
[root@kevin ~]# cat /opt/script/6_main_check.sh
#!/bin/bash
 
for i in $(cat /opt/ip.list)
do
/usr/bin/rsync -e "ssh -p22" -avpgolr /usr/bin/main_check $i:/usr/bin/ > /dev/null 2>&1
ssh -p22 root@$i "echo $i;sh /usr/bin/main_check"
done
 
[root@kevin ~]# cat /usr/bin/main_check
#!/bin/bash
NUM=$(ps -ef|grep -w main|grep -v grep|wc -l)
if [ $NUM -eq 0 ];then
   echo "Oh!My God! It's broken! main is stoped!"
else
   echo "Don't worry! main is running!"
fi
 
 
检查脚本执行结果
[root@kevin ~]# sh /opt/script/6_main_check.sh
192.168.10.11
Don't worry! main is running!
192.168.10.12
Don't worry! main is running!
192.168.10.13
Don't worry! main is running!
192.168.10.14
Don't worry! main is running!
192.168.10.15
Don't worry! main is running!
192.168.10.16
Don't worry! main is running!
192.168.10.17
Don't worry! main is running!
 
检查脚本执行结果的打印脚本
[root@kevin ~]# cat /mnt/main_check_result.sh
#!/bin/bash
NUM=$(/bin/bash /opt/script/6_main_check.sh |grep -w "main is stoped"|wc -l)
CONTENT=$(/bin/bash /opt/script/6_main_check.sh |grep -w "main is stoped")
if [ $NUM -ne 0 ];then
    echo -e "$(date +%Y年%m月%d日) $(date +%A) $(date +%H时%M分%S秒)\n$(/bin/bash /opt/script/6_main_check.sh |grep  "main is stoped" -B1)\n">> /mnt/main_check_result.log
else
    echo -e "$(date +%Y年%m月%d日) $(date +%A) $(date +%H时%M分%S秒)\n$(echo "当前时段所有机器的main进程运行正常,无需担心哈!")\n">> /mnt/main_check_result.log
fi
 
main检查的结果文件内容
[root@kevin ~]# cat /mnt/main_check_result.log
2018年10月10日 星期三 20时30分41秒
当前时段所有机器的main进程运行正常,无需担心哈!
 
2018年10月10日 Wednesday 20时30分46秒
当前时段所有机器的main进程运行正常,无需担心哈!
 
2018年10月10日 Wednesday 20时35分45秒
当前时段所有机器的main进程运行正常,无需担心哈!
 
2018年10月10日 Wednesday 20时40分45秒
当前时段所有机器的main进程运行正常,无需担心哈!

以上的脚本：不管main进程状态检查结果是否正常，都打印一个结果到/mnt/main_check_result.log文件中，
其实检查结果正常的时候，可以不必打印结果（即echo "****" > /dev/null 2 >&1）；
只有检查结果不正常的时候才打印结果，这样比较好点。

对/mnt/main_check_result.log文件大小做判断，当该文件大于60M(即61865984)时就清空。

[root@kevin ~]# ls -l /mnt/main_check_result.log
-rw-r--r--. 1 root root 16998 Nov 19  2017 /mnt/main_check_result.log

[root@kevin ~]# ls -l /mnt/main_check_result.log|awk '{print $5}'
16998

[root@kevin ~]# ls -l /mnt/main_check_result.log|awk '{print $9}'
/mnt/main_check_result.log

[root@kevin ~]# vim /root/main_check_result.log_del.sh
#!/bin/bash
size=$(ls -l /mnt/main_check_result.log|awk '{print $5}')
file=$(ls -l /mnt/main_check_result.log|awk '{print $9}')

if [ $size -gt 61865984 ] ; then 
    echo $file; echo $size
    echo >$file
fi

[root@kevin ~]# chmod 755 /root/main_check_result.log_del.sh
[root@kevin ~]# crontab -e
0 1 * * 6 /bin/bash -x /root/main_check_result.log_del.sh >/dev/null 2>&1
weixin_33827965
关注
  • 2
    点赞
  • 踩
  • 7
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
shell中打印出文件匹配行(总数)和匹配的第N行
niubiqigai的博客
01-01 2629
有时候我们需要两个文件来记录已执行过和待执行的记录，这个时候我们需要找到已执行文件中**具有某种特征的行**，以此来确定下一个执行任务。
shell快速打印文件目录下所有包含某个“字符串”的所有字符串
三月江城的博客
05-27 474
#!/bin/bash echo "请输入要截取的字符串前缀:" read identifyPre echo "请输入要截取的字符串后缀:" read identifySuf echo "输入的前后缀是：${identifyPre}${identifySuf}" echo "确定：(Y/N)" read confirm if [ "$confirm" = "Y" ] || [ "$confirm" = "y" ]; then echo ">>>>>>>&g
shell 查找指定路径下包含特定关键字的文件，并输出关键字所在文件及所在行
m0_46535940的博客
06-02 2996
xxxxxx91116 2013-04-25 20:37:30 4676 收藏 2 展开 #!/bin/bash #作者：zxx #日期：2013.04.25 #功能描述：在FIND_PATH路径下查找包含关键字SOURCE的文件，并列出所在行,SOURCE由用>户输入，写的目的是为了读源码方便 #查找文件都在这个路径下面 FIND_PATH="/home/zxx/毕设/毕业设计/BT源码/transmission-2.42/transmission-2.42/libtransmission" rea
Shell脚本 打印匹配行的上一行
weixin_34252686的博客
04-29 1905
2019独角兽企业重金招聘Python工程师标准>>> ...
shell 匹配某行字符串，并输出此行其他字符串
LEEY的专栏
12-20 6707
文件名：mbconfig 内容： Set_DQ_0 0 KEEP Set_DQ_1 0 VALUE_0 要求：匹配字符Set_DQ_1这行，并输出VALUE_0 值 实现： ​cat mbconfig | awk '/Set_DQ_1/'|awk '{print $3}' 赋给变量 SP=`cat mbconfig | awk
Shell中去除字符串前后空格的方法
01-20
经常碰到的场景，需要去除字符串中的前后的空格。在Shell中不像其他语言有strip()来处理，不过也是可以使用诸如awk等命令来处理。  下面是一个简单示例: [root@localhost ~]# echo ' A B C ' | awk '{gsub(/^\s+|\...
shell脚本中28个特殊字符的作用简明总结
01-20
1. #注释作用, #! 除外此外, 在参数替换 echo ${PATH#*:} 这里不表示注释, 数制转换, 不表示注释 echo $((2#101011)) 2. ; 命令行分隔符, 可以在一行中写... 表示上一级目录正则表达式中作为单个字符匹配5. “”, ‘’
Shell脚本计算字符串长度和判断字符串为空小技巧
09-15
在Shell脚本编程中，处理字符串是常见的任务之一，其中包括计算字符串长度和判断字符串是否为空。下面我们将详细探讨这两种操作的几种实现方法。 首先，我们来看如何计算字符串的长度。在Shell脚本中有三种常见的...
Shell脚本中的位置变量参数（特殊字符）实例讲解
09-15
在Shell脚本编程中，位置变量参数和特殊字符扮演着重要的角色，它们使得脚本能够灵活地处理用户输入的参数和脚本自身的运行状态。以下是对这些特殊字符的详细解释和实例： 1. `$#`：这个特殊变量表示传递给脚本的...
shell查找某字符串在某文件中出现行数
热门推荐
hsd2012的专栏
06-07 2万+
一、简介 有的时候，我们需要分析日志来排查错误，但是日志文件特别大，打开肯定是很慢的，也是没法接受的，我们需要的是快速定位错误出现的位置，并定向取出错误信息。 快速定位某个字符串在某文件中出现的行数，可以使用 linux中grep命令 默认情况，grep命令只会输出匹配的字符串所在的行，如下： 要想同时输出行号，可以指定参数-n，关于-n参数描述如下： -n, --line-numb...
Shell编程三剑客之 awk
GaLiCHaoFan1的博客
08-10 1744
在 Linux/UNIX 系统中，awk 是一个功能强大的编辑工具，逐行读取输入文本，默认以空格或tab键作为分隔符作为分隔，并按模式或者条件执行编辑命令。而awk比较倾向于将一行分成多个字段然后进行处理。AWK信息的读入也是逐行指定的匹配模式进行查找，对符合条件的内容进行格式化输出或者过滤处理，可以在无交互的情况下实现相当复杂的文本操作，被广泛应用于 Shell 脚本，完成各种自动化配置任务。NF代表当前需要处理的行所包含的字段个数。...
shell查找匹配行，输出该行并输出下面的一行
zhaozuoyou的博客
03-22 3639
awk: awk '$0~/keyword/{print $0; getline; print $0;}' file 例： awk '$0~/hostname.rm2/{print $0;getline;print $0;}' yarn-site.xml <name>yarn.resourcemanager.hostname.rm2</name> <value>host*******</value> print $0：打印该行 getline;pri
python字符串通配符_Python: 用shell通配符匹配字符串，fnmatch/fnmatchcase
weixin_36350581的博客
03-02 336
问题：想使用Unix Shell 中常用的通配符(比如*.py , Dat[0-9]*.csv 等) 去匹配文本字符串解决方案：1.fnmatch 模块提供了两个函数—— fnmatch() 和fnmatchcase() ，可以用来实现这样的匹配。用法如下：>>> from fnmatch import fnmatch, fnmatchcase>>> fnmat...
#Shell脚本--输出两个字符串的最长匹配部分
weixin_34167043的博客
07-02 275
2019独角兽企业重金招聘Python工程师标准>>> ...
shell获取某一行中指定字符后的内容
楼中望月
10-21 2万+
比如有个xxx.txt文件，里面有很多行内容，其中有行内容为ro.xxx=123，要想获取到123这个值，可以如下处理 #!/bin/sh NAME=`cat xxx.txt | grep 'ro.xxx' | awk -F '=' '{print $2}'` echo $NAME ...
shell脚本查找、抽取指定字符串的方法(sed,grep,awk,cut)
weixin_41552582的博客
09-23 7413
最近使用：iwconfig wlan0 | sed 's/ /\n/g' | grep -i mode //查看wlan0模式 原理：先以空格为通配符，并将其替换成换行符“\n”；每一段字符串单独成行，再grep查找 在linux中经常要对一些动态的文本文件抽取指定的字符串，比如执行ps命令后想要获取指定的运行进程（如ps自己）的PID号(同一个进程每次启动的时候pid号是随机分配的)。该怎么办呢？当然，可以用一些截取字符串的方法，这里介绍一下用2种方法来解决这类问题。 一、sed+grep方法...
shell脚本--sed的用法
xiapang009的专栏
10-21 1万+
写的比较好的sed用法，记录下以后查阅留着用! sed在处理文本时是逐行读取文件内容，读到匹配的行就根据指令做操作，不匹配就跳过。 sed是Linux下一款功能强大的非交互流式文本编辑器，可以对文本文件进行增、删、改、查等操作，支持按行、按字段、按正则匹配文本内容，灵活方便，特别适合于大文件的编辑。本文主要介绍sed的一些基本用法，并通过shell脚本演示sed的使用实例。 1.sed的使用方法，调用sed 命令的语法有两种： 一.在命令行指定sed指令对文本进行处理：sed +选项 ‘指令’ 文.
shell脚本中判断变量中是否有某些字符
最新发布
03-25
可以使用if语句和字符串匹配来判断变量中是否有某些字符，例如： ``` if [[ $var == *"some_string"* ]]; then echo "Variable contains 'some_string'" fi ``` 其中，`$var`是需要判断的变量名，`*"some_string...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值