shell+curl监控网站页面(域名访问状态)，并利用sedemail发送邮件

最新推荐文章于 2024-06-12 13:15:38 发布
最新推荐文章于 2024-06-12 13:15:38 发布
阅读量1.4w 收藏
点赞数
对公司几个主要站点的域名访问情况进行监控。下面分享一个监控脚本，并利用sendemail进行邮件发送。

监控脚本如下：
下面是写了一个多线程的网站状态检测脚本，直接从文件中读出站点地址，然后用curl去检测返回码，发现速度非常好，基本几秒钟内就能出结果。

[root@bastion-IDC ~]# cat url-monit.sh
#!/bin/bash
#取出网站数据
data=`cat /root/url.list`
if [ -z "$data" ];then
echo "Faild to connect database!"
exit 1
fi
test -f result.log && rm -f result.log
function delay {
sleep 2
}
tmp_fifofile=/tmp/$$.fifo
mkfifo $tmp_fifofile
exec 6<>$tmp_fifofile
rm $tmp_fifofile
#定义并发线程数，需根据vps配置进行调整。
thread=100
for ((i=0 ;i<$thread;i++ ))
do
echo
done>&6
#开始多线程循环检测
for url in $data
do
read -u6
{
#curl抓取网站http状态码
code=`curl -o /dev/null --retry 3 --retry-max-time 8 -s -w %{http_code} $url`
echo "HTTP Status of $url is $code ">>result.log
#判断子线程是否执行成功，并输出结果
delay && {
echo "HTTP Status of $url is $code"
} || {
echo "Check thread error!"
}
echo >& 6
}&
done
#等待所有线程执行完毕
wait
exec 6>&-
exit 0

 

[root@bastion-IDC ~]# cat url.list
www.fangfull.com
www.huanqiu.com
erp.fangfull.com
fanghuadmin.huanqiu.com
www.hqsbtime.com
qmjjr.huanqiu.com
admin.huanqiu.com
m.huanqiu.com
fq.huanqiu.com
mfq.huanqiu.com
zc.huanqiu.com
mzc.huanqiu.com
uc.huanqiu.com
fanghu.huanqiu.com
img.huanqiu.com
app.huanqiu.com

www.fangfull.cn
www.huanqiu.wang.com

 

执行脚本：

[root@bastion-IDC ~]# sh url-monit.sh
HTTP Status of app.huanqiu.com is 301
HTTP Status of fanghu.huanqiu.com is 301
HTTP Status of www.huanqiu.com is 301
HTTP Status of fanghuadmin.huanqiu.com is 301
HTTP Status of admin.huanqiu.com is 301
HTTP Status of mfq.huanqiu.com is 301
HTTP Status of zc.huanqiu.com is 301
HTTP Status of erp.fangfull.com is 302
HTTP Status of www.fangfull.com is 200
HTTP Status of fq.huanqiu.com is 301
HTTP Status of img.huanqiu.com is 301
HTTP Status of www.hqsbtime.com is 200
HTTP Status of mzc.huanqiu.com is 301
HTTP Status of www.fangfull.cn is 000
HTTP Status of uc.huanqiu.com is 301
HTTP Status of qmjjr.huanqiu.com is 301
HTTP Status of m.huanqiu.com is 301
HTTP Status of www.huanqiu.wang.com is 000

 

 

测试利用上面的多线程的网站状态检测脚本的执行时间，如下，12s多执行完毕！
[root@bastion-IDC ~]# time sh url-monit.sh
HTTP Status of app.huanqiu.com is 301
HTTP Status of fanghu.huanqiu.com is 301
HTTP Status of www.huanqiu.com is 301
HTTP Status of fanghuadmin.huanqiu.com is 301
HTTP Status of admin.huanqiu.com is 301
HTTP Status of mfq.huanqiu.com is 301
HTTP Status of zc.huanqiu.com is 301
HTTP Status of erp.fangfull.com is 302
HTTP Status of www.fangfull.com is 200
HTTP Status of fq.huanqiu.com is 301
HTTP Status of img.huanqiu.com is 301
HTTP Status of www.hqsbtime.com is 200
HTTP Status of mzc.huanqiu.com is 301
HTTP Status of www.fangfull.cn is 000
HTTP Status of uc.huanqiu.com is 301
HTTP Status of qmjjr.huanqiu.com is 301
HTTP Status of m.huanqiu.com is 301
HTTP Status of www.huanqiu.wang.com is 000

 

real 0m12.782s
user 0m0.085s
sys 0m0.096s

 

 

下面再测试直接curl监测网站状态的时间：
[root@bastion-IDC ~]# cat testurl-monit.sh
#!/bin/bash

for url in `cat /root/url.list`
do
code=`curl -I -s $url | head -1 | cut -d " " -f2`
echo "HTTP Status of $url is $code "
done

 

 

如下，这个脚本执行时间要30s多！
[root@bastion-IDC ~]# time sh testurl-monit.sh
HTTP Status of www.fangfull.com is 200
HTTP Status of www.huanqiu.com is 301
HTTP Status of erp.fangfull.com is 302
HTTP Status of fanghuadmin.huanqiu.com is 301
HTTP Status of www.hqsbtime.com is 200
HTTP Status of qmjjr.huanqiu.com is 301
HTTP Status of admin.huanqiu.com is 301
HTTP Status of m.huanqiu.com is 301
HTTP Status of fq.huanqiu.com is 301
HTTP Status of mfq.huanqiu.com is 301
HTTP Status of zc.huanqiu.com is 301
HTTP Status of mzc.huanqiu.com is 301
HTTP Status of uc.huanqiu.com is 301
HTTP Status of fanghu.huanqiu.com is 301
HTTP Status of img.huanqiu.com is 301
HTTP Status of app.huanqiu.com is 301
HTTP Status of www.fangfull.cn is
HTTP Status of www.huanqiu.wang.com is

 

real 0m31.689s
user 0m0.067s
sys 0m0.124s

 


显然多线程的测试脚本执行速度要快点！所以保留第一个脚本url-monit.sh！


-------------------------------------------------------------------------------------------------------
下面是邮件报警设置：

1）先下载安装包到本地，解压。
[root@bastion-IDC ~]# cd /usr/local/src/
[root@bastion-IDC src]# wget -c http://caspian.dotconf.net/menu/Software/SendEmail/sendEmail-v1.56.tar.gz
[root@bastion-IDC src]# tar -zvxf sendEmail-v1.56.tar.gz
[root@bastion-IDC src]# cd sendEmail-v1.56
[root@bastion-IDC sendEmail-v1.56]# cp -a sendEmail /usr/local/bin/
[root@bastion-IDC sendEmail-v1.56]# chmod +x /usr/local/bin/sendEmail
[root@bastion-IDC sendEmail-v1.56]# file /usr/local/bin/sendEmail
/usr/local/bin/sendEmail: a /usr/bin/perl -w script text executable

2）安装下依赖
[root@bastion-IDC sendEmail-v1.56]# yum install perl-Net-SSLeay perl-IO-Socket-SSL -y


3）部署发送脚本

这里由于一些域名做了跳转，所以如果发现域名访问后的结果不是200,301,302，那么就是不能正常访问状态，需要发送报警邮件！

如下，报警邮件发送给wangshibo@huanqiu.cn和hugang@huanqiu.cn两个邮箱：
[root@bastion-IDC ~]# cat url-mail.sh
#!/bin/bash
NUM=$(/bin/sh /root/url-monit.sh|grep -v "200"|grep -v "301"|grep -v "302"|wc -l)
DOMAIN=$(/bin/sh /root/url-monit.sh|grep -v "200"|grep -v "301"|grep -v "302"|awk -F" " '{print $4}')
if [ $NUM -ne 0 ];then
for url in $DOMAIN;do
/usr/local/bin/sendEmail -f ops@huanqiu.cn -t wangshibo@huanqiu.cn -s smtp.huanqiu.cn -u "Domain monitoring" -o message-content-type=html -o message-charset=utf8 -xu ops@huanqiu.cn -xp zh@123bj -m "[$url] can not normally access,please deal with it as soon as possible "
/usr/local/bin/sendEmail -f ops@huanqiu.cn -t hugang@huanqiu.cn -s smtp.huanqiu.cn -u "Domain monitoring" -o message-content-type=html -o message-charset=utf8 -xu ops@huanqiu.cn -xp zh@123bj -m "[$url] can not normally access,please deal with it as soon as possible "
done
else
echo "it is OK"
fi

 

-----------------------------------------------------------------
邮件发送参数说明：
命令说明：
/usr/local/bin/sendEmail                           #命令主程序
-f from@uhanqiu.cn                                 #发件人邮箱
-t to@huanqiu.cn                                     #收件人邮箱
-s smtp.huanqi.cn                                     #发件人邮箱的smtp服务器
-u "....."                                                   #邮件的标题
-o message-content-type=html                #邮件内容的格式,html表示它是html格式
-o message-charset=utf8                        #邮件内容编码
-xu from@huanqiu.cn                               #发件人邮箱的用户名
-xp zh@123bj                                         #发件人邮箱密码
-m "......"                                                #邮件的具体内容
-----------------------------------------------------------------

 

[root@bastion-IDC ~]# sh -x url-mail.sh
++ /bin/sh /root/url-monit.sh
++ grep -v 200
++ grep -v 301
++ grep -v 302
++ wc -l
+ NUM=2
++ /bin/sh /root/url-monit.sh
++ grep -v 200
++ grep -v 301
++ grep -v 302
++ awk '-F ' '{print $4}'
+ DOMAIN='www.fangfull.cn
www.huanqiu.wang.com'
+ '[' 2 -ne 0 ']'
+ for url in '$DOMAIN'
+ /usr/local/bin/sendEmail -f ops@huanqiu.cn -t wangshibo@huanqiu.cn -s smtp.huanqiu.cn -u 'Domain monitoring' -o message-content-type=html -o message-charset=utf8 -xu ops@huanqiu.cn -xp zh@123bj -m '[www.fangfull.cn] can not normally access,please deal with it as soon as possible '
Oct 25 19:21:43 bastion-idc sendEmail[19668]: Email was sent successfully!
+ for url in '$DOMAIN'
+ /usr/local/bin/sendEmail -f ops@huanqiu.cn -t wangshibo@huanqiu.cn -s smtp.huanqiu.cn -u 'Domain monitoring' -o message-content-type=html -o message-charset=utf8 -xu ops@huanqiu.cn -xp zh@123bj -m '[www.huanqiu.wang.com] can not normally access,please deal with it as soon as possible '
Oct 25 19:21:47 bastion-idc sendEmail[19672]: Email was sent successfully!
+ for url in '$DOMAIN'
+ /usr/local/bin/sendEmail -f ops@huanqiu.cn -t huang@huanqiu.cn -s smtp.huanqiu.cn -u 'Domain monitoring' -o message-content-type=html -o message-charset=utf8 -xu ops@huanqiu.cn -xp zh@123bj -m '[www.fangfull.cn] can not normally access,please deal with it as soon as possible '
Oct 25 19:21:43 bastion-idc sendEmail[19668]: Email was sent successfully!
+ for url in '$DOMAIN'
+ /usr/local/bin/sendEmail -f ops@huanqiu.cn -t hugang@huanqiu.cn -s smtp.huanqiu.cn -u 'Domain monitoring' -o message-content-type=html -o message-charset=utf8 -xu ops@huanqiu.cn -xp zh@123bj -m '[www.huanqiu.wang.com] can not normally access,please deal with it as soon as possible '
Oct 25 19:21:47 bastion-idc sendEmail[19672]: Email was sent successfully!

 


登陆wangshibo@huanqiu.cn邮箱，发现已经收到报警邮件了！

 

 

 

最后添加计划任务，每5分钟执行一次
[root@bastion-IDC ~]# crontab -l
#domain monit
*/5 * * * * /bin/bash -x /root/url-mail.sh >/dev/null 2>&1

 

***************当你发现自己的才华撑不起野心时，就请安静下来学习吧***************
SQZHAO
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
shell监控网站是否可以访问
03-26
监控网站是否可以访问，比如公司项目放到外网了,要写个模块查看项目是否宕机,可以使用该shell,它是根据http_code判断网站是否宕机的。
shell 监控网站
不远远方
04-06 672
http://www.maiziedu.com/wiki/linux/monitor/ 网站服务器监控的内容有： 监控WEB服务器的状态； 监控数据库服务器的工作状态； 监控网络的工作状态； 监控服务器的资源使用状态； 监控其他需要关注的服务状态。 网站服务器监控的内容有： 邮件报警； 短信报警； 页面状态报警。 监控任务部署 1.监控网络工作状态 1）监控网络的...
curl发送邮件需要哪些参数设置？如何配置？
最新发布
DengHua2203的博客
06-12 622
使用curl发送邮件是一种简单而有效的方法，无需依赖传统的邮件客户端程序。AokSend，API/SMTP接口搭配curl，邮件发送更高效，一键操作，轻松实现邮件营销，助您业务腾飞！
shell网站监控
weixin_42562106的博客
04-12 267
监控网站是否宕机 #!/bin/bash token="862c407-0050-4974-8e48-e7e5673811fe" wget --spider -q -o /dev/null --tries=1 -T 6 https://www.bAIDU.net if [ $? -eq 0 ]; then echo 'ok' >/dev/null else curl 'https://qyapi.weixin.qq.com/cgi-bin/webhook/send?key
shell脚本监控网站状态
weixin_30929195的博客
03-13 245
shell脚本监控网站状态 #!/bin/sh date=`date +"%Y%m%d-%H%M"` title="status" contentFail="status is not ok:" contentSuccess="status is ok:" url="https://www.abc.com" status=`curl -m 20 -s -I $url | gr...
检查网站是否正常的shell脚本 并发送邮件
Ethe的博客
10-29 341
#! /bin/bash source /etc/profile envor="xxxx 环境" webaddr="https://xxxxx/loginUI.shtml" tt1=`curl -I -s 'https://xxxxx/loginUI.shtml' | head -1 | cut -d " " -f2` errtitle=$envor"出现异常" errinfo=$envor$w...
Shell+Curl网站状态检查脚本 抓出无法访问的站点
09-15
【Shell+Curl网站状态检查脚本】是一种利用Unix/Linux shell脚本语言和cURL命令行工具来批量检查网站状态的方法。此脚本主要用于自动化监测多个网站的可访问性，识别那些返回非200状态码（通常表示请求未成功）的...
Linux Shell+Curl网站健康状态检查脚本，抓出中国博客联盟失联站点
09-15
【Linux Shell+Curl网站健康状态检查脚本】是一种利用Shell脚本配合Curl命令来检测网站健康状况的工具。在本场景中，脚本的主要目的是监控中国博客联盟的成员站点，以便及时发现并处理失联的博客站点。下面将详细...
利用Python自动监控网站并发送邮件告警的方法
09-21
### 利用Python自动监控网站并发送邮件告警的关键知识点 #### 一、项目背景与需求分析 在当今数字化时代，网站的稳定运行对于企业和个人至关重要。任何网站故障都可能导致客户流失、品牌形象受损等问题。因此，...
shell脚本监控网站是否正常
weixin_34121304的博客
06-11 964
#!/bin/bash #20190611url.txt文件直接填写需要监控的网址第三版 #QQ450433231 time=`date+"%Y/%m/%d%H:%M.%S"` [!-f/root/url.txt]&&echo"url.txt文件不存在"&&exit1 whilereadurl do nsloo...
Curl 工具的妙用：shell中用curl实现业务监控和故障自动处理
贤时间
12-05 2947
不时会遇到JVM内存溢出或服务进程僵死导致的应用不可访问的情况，这个时候一般需要重启下服务进程。虽然在zabbix中对web的监控能监控到且可以执行远程命令，但是基于安全考虑，一般不会再zabbix 的agent上开启允许执行远程命令的权限。可以在本机安装curl工具来实现对web的监控，辅助些脚本就可以实现故障和恢复的告警发送和进程重启了。 #!/usr/bin/ksh #############
域名监控的TXT脚本文件判断阿里云备案
09-13
域名监控的TXT脚本文件判断阿里云备案域名监控的TXT脚本文件判断阿里云备案
Shell脚本监控网站页面正常打开情况
菲宇运维
09-25 3163
用了shell脚本写了一个监控。通过curl一个固定页面的200状态码，如果是200，就说网站是正常的,如果不是200就自动重启网站，然后发邮件到QQ邮箱。自己在上QQ的同时，通过微信也可以收到报警，不但可以收到报警，还可以解决问题。基本上也可以解决web的故障。 #! /bin/bash source /etc/profile A="web is Good !" ip=`ifconfig e...
利用curl 实现URL监控
weixin_30905133的博客
06-19 417
#curl 命令介绍 curl命令在运维中经常使用，但运维中常用的参数也并不多，因此也是列表如下 -I/--head 显示响应头信息 -m/--max-time <seconds> 访问超时的时间 -o/--output <file> 记录访问信息到文件 -s/--silent 沉默模式访问，就是不输出信息 -w/...
keepalived 监测域名解析脚本
zhaoyangjian724的专栏
01-13 910
v-dev-redis01:/root# cat a1.pl sub check_dns{ use LWP::UserAgent; use Net::Ping; $web = shift; $p = Net::Ping->new("icmp"); if ($p->ping($web,2)){ return 1; } else { return 0; }} ; $va
shell批量监控网站状态码
weixin_34244102的博客
04-26 227
shell批量监控网站状态码脚本,使用curl很慢。等我学完其他方式，在来更新。 #!/bin/bash #GuoYabin yuming=`/bin/cat yuming.txt` for i in $yuming do result=`/usr/bin/curl -I $i 2>/dev/null|awk '/HTTP/{print $2}'` ...
发布一款域名监控小工具——Domain(IP)Watcher
weixin_33851604的博客
11-15 217
　　域名是否正常，网站是否可以正常访问是很头痛的问题，怎样简单地监控域名是否可以正常访问呢，这里发布一款域名监控小工具：Domain(IP)Watcher 功能： 　　监控给定的域名，一旦域名连续30秒(这是默认值，可以在源码中修改)无法Ping通，立刻发邮件到指定邮箱，并发短信给站长 效果图：　　 正常情况 异常情况 邮件 短信 原理： 　　用后台线程循环每隔5...
使用python脚本监控指定域名解析
weixin_33953249的博客
12-20 314
python脚本：21,0-1All #!/usr/bin/python #-*-coding:utf-8-*- #此脚本用于检...
Shell常用脚本：监控某域名、IP的端口是否通【telnet】
weixin_39651356的博客
02-18 2265
#mermaid-svg-0CZnyVZ6J8Y1nWBQ .label{font-family:'trebuchet ms', verdana, arial;font-family:var(--mermaid-font-family);fill:#333;color:#333}#mermaid-svg-0CZnyVZ6J8Y1nWBQ .label text{fill:#333}#mermaid-svg-0CZnyVZ6J8Y1nWBQ .node rect,#mermaid-svg-0CZnyVZ6J8
shell脚本 curl发送post请求
09-15
要通过Shell脚本使用curl发送POST请求，可以使用以下方法： 1. 首先，你需要编写一个Shell脚本文件，并确保已经安装了curl工具。在脚本中，你可以使用curl命令来发送HTTP请求。 2. 在脚本中，你可以使用变量来存储请求的参数和请求的URL。可以使用read命令来获取用户输入的请求参数和URL。 3. 接下来，使用curl命令发送POST请求。你可以使用-X选项指定请求的方法为POST，并使用-d选项来指定请求的参数。例如，使用-d选项可以将请求参数作为字符串传递给curl命令。 4. 最后，你可以将curl的输出结果保存到日志文件中。你可以使用重定向操作符(>>)将结果追加到日志文件中。例如，echo命令可以将请求的类型、请求的参数、请求的URL和curl的输出结果写入日志文件。 以下是一个示例的Shell脚本代码，用于通过curl发送POST请求并将结果保存到日志文件中： ```shell #!/bin/bash # 设置变量 req_param="" url="" log_dir="log" log_file="$log_dir/curl-$(date +%F).log" cmd="POST" # 获取用户输入的请求参数 echo "请输入请求参数request body:" read -e req_param # 获取用户输入的URL echo "请输入URL:" while true do read -e url if [ "$url" ] then break else echo "URL输入有误，请重新输入:" fi done # 发送POST请求 result=$(curl -X POST -d "$req_param" "$url") # 判断日志文件夹是否存在，不存在则创建 if [ ! -e "$log_dir" ] then mkdir -p "$log_dir" fi # 将请求类型、请求参数、请求URL和curl的输出结果写入日志文件 echo "$(date '+%F %H:%M:%S.%N') request-type:$cmd, request-body:$req_param request-url:$url , result:$result" >> "$log_file" # 输出结果 echo "$result" ``` 请注意，上述代码中的变量和命令都是根据你提供的引用内容编写的。你可以根据自己的需求进行修改和调整。 希望以上信息能够帮助到你。如果有任何问题，请随时提问。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值