第三十二课 SHELL编程

最新推荐文章于 2023-11-26 09:45:00 发布

zanghaos

最新推荐文章于 2023-11-26 09:45:00 发布

阅读量238

点赞数

本文链接：https://blog.csdn.net/zanghaos/article/details/81326381

版权

20.16/20.17 shell中的函数

函数就是子shell, 是一个代码段,定义完函数就可以引用它

格式:

function f_name() {command}
注释: function后面跟的是函数的名字,函数名字后面有中括号和花括号,花括号是具体的命令.

例子

# cat function.sh 
#! /bin/bash 
function inp(){ 
echo $1 $2 $3 $0 $# 
} 
inp 1 a 2 #执行结果
# sh function.sh
1 a 2 function.sh 3注释:$0 --> 表示脚本本身 
$# --> 表示参数个数演示1.1 
说明:这脚本和上面那个是一样,只是这样会比较清晰.

20.18 shell中的数组

所谓数组就是一串字符串和一串数字,形成一个变量,把这个变量叫做属组,针对数组再做一些操作,比如说可以取属组的某一个值(数组的第一个,第二个),也可以针对属组进行分片,取数组中某几个数值,某几个元素. 数组很有用,但在使用的场景并不多,不过也需要看需求.

定义数组 a=(1 2 3 4 5); 
查看a数组元素：echo ${a[*]} 
查看数组的元素个数 echo ${#a[*]} 
查看第三个元素，数组从0开始echo ${a[2]}  
echo ${a[*]} 等同于 ${a[@]} 显示整个数组 
数组赋值 ：a[1]=100; echo ${a[@]} 
如果下标不存在则会自动添加一个元素：a[5]=2; echo ${a[*]}  
删除数组元素 ：unset a[1]；echo ${a[*]}  
删除（清空）数组值：unset a；echo ${a[*]}
数组分片 
a=(`seq 1 5`) 
echo ${a[*]:0:3} 从第一个元素开始，截取3个 
echo ${a[*]:1:4} 从第二个元素开始，截取4个 
echo ${a[*]:0-3:2}从倒数第3个元素开始，截取2个 
替换元素值 ：a=(${a[*]/3/100})；echo ${a[*]}

20.19 告警系统需求分析

1. 需求：使用shell定制各种个性化告警工具，但需要统一化管理、规范化管理。
2. 思路：指定一个脚本包，包含主程序、子程序、配置文件、邮件引擎、输出日志等。
3. 主程序：作为整个脚本的入口，是整个系统的命脉。
4. 配置文件：是一个控制中心，用它来开关各个子程序，指定各个相关联的日志文件。
5. 子程序：这个才是真正的监控脚本，用来监控各个指标。
6. 邮件引擎：是由一个python程序来实现，它可以定义发邮件的服务器、发邮件人以及发件人密码
7. 输出日志：整个监控系统要有日志输出。

20.20 告警系统主脚本

介绍：

定义监控系统的各个目录，然后再去定义主脚本，因为是分布式的，所以需要每一台机器都需要定义，事先创建好各个脚本和各个目录，随后脚本直接拷贝过去即可，然后再去做一些更改，所有的shell脚本放到 /usr/local/sbin/ 目录下，方便查找。

1.切换到 /usr/local/sbin/ 目录下，并创建子目录

[root@hf-01 ~]# cd /usr/local/sbin/
[root@hf-01 sbin]# mkdir mon
[root@hf-01 sbin]# cd mon
[root@hf-01 mon]# ls
[root@hf-01 mon]# mkdir bin conf shares log mail
[root@hf-01 mon]# ls
bin  conf  log  mail  shares
[root@hf-01 mon]#

切换到 bin 目录下（主脚本放在 bin 目录下，主脚本作为一个入口，应该去判断配置文件，查看某监控项目是否需要监控，还需调用各个需要监控的子脚本）

[root@hf-01 mon]# cd bin
[root@hf-01 bin]# ls
[root@hf-01 bin]# vim main.sh

 #!/bin/bash
#Written by aming.
# 是否发送邮件的开关，
export send=1
#只要把send 改成了1 ，就会给下面所有的监控的项目都会发送邮件，export表示所有的变量会应用在所有的子脚本里（若是系统处于维护状态，就需要关闭所有的服务，这时候就需要先把告警关闭，否则会一直发邮件）
# 过滤ip地址；可以加定义一个hostname，这样可以知道是哪台机器
export addr=`/sbin/ifconfig |grep -A1 "eno6777736: "|awk '/inet/ {print $2}'`
dir=`pwd`
# 找一下当前脚本所在的目录
# 只需要最后一级目录名
last_dir=`echo $dir|awk -F'/' '{print $NF}'`
# 下面的判断目的是，保证执行脚本的时候，我们在bin目录里，不然监控脚本、邮件和日志很有可能找不到
if [ $last_dir == "bin" ] || [ $last_dir == "bin/" ]; then
    conf_file="../conf/mon.conf"
else
    echo "you shoud cd bin dir"
    exit
fi
exec 1>>../log/mon.log 2>>../log/err.log
#日志记录
echo "`date +"%F %T"` load average"
#求出系统负载
/bin/bash ../shares/load.sh
#先检查配置文件中是否需要监控502，到配置文件中遍历一遍，看看是否需要监控502
if grep -q 'to_mon_502=1' $conf_file; then
    export log=`grep 'logfile=' $conf_file |awk -F '=' '{print $2}' |sed 's/ //g'`
#找出log的路径
    /bin/bash  ../shares/502.sh
fi

20.21 告警系统配置文件

介绍

shell项目-告警系统mon.conf内容配置文件（一定要放到conf目录下，名称必须为mon.conf ——PS：不能随意改动，因为在主脚本中已经设置好了），定义一些开关，定义一些对应的日志路径，或者说监控mysql的用户名和密码，以及IP地址port端口等

[root@hf-01 bin]# pwd
/usr/local/sbin/mon/bin
[root@hf-01 bin]# cd ..
[root@hf-01 mon]# vim conf/mon.conf

 ## to config the options if to monitor
## 定义mysql的服务器地址、端口以及user、password
to_mon_cdb=0   
 ##cdb等于0 or 1, default 0,0 not monitor, 1 monitor
db_ip=10.20.3.13
db_port=3315
db_user=username
db_pass=passwd
## httpd   如果是1则监控，为0不监控
to_mon_httpd=0
## php 如果是1则监控，为0不监控
to_mon_php_socket=0
## http_code_502  需要定义访问日志的路径
to_mon_502=1
logfile=/data/log/xxx.xxx.com/access.log
## request_count   定义日志路径以及域名
to_mon_request_count=0
req_log=/data/log/www.discuz.net/access.log
domainname=www.discuz.net

把请求日志摘出来的目的，你要考虑到要想把shell写得规范化，标准化，那你肯定要考虑监控的机器肯定不止1台；要想要让脚本通用，兼容性很强，就需要把所有需要监控的服务的日志都载入到配置文件中，改动起来方便，省得后期改动起来一个一个的对应脚本去修改，就太麻烦了

20.22 告警系统监控项目

介绍

定义子脚本，就是监控项目

第一个load.sh是必须要有的，因为在主脚本中已经定义了任何一台机器都要监控系统负载

[root@hf-01 mon]# cd shares/
[root@hf-01 shares]# pwd
/usr/local/sbin/mon/shares
[root@hf-01 shares]# vim load.sh

#! /bin/bash
##Writen by aming##
load=`uptime |awk -F 'average:' '{print $2}'|cut -d',' -f1|sed 's/ //g' |cut -d. -f1`
#计算系统负载
if [ $load -gt 10 ] && [ $send -eq "1" ]
then
    echo "$addr `date +%T` load is $load" >../log/load.tmp  
#这条命令的目的是为了发送日志
    /bin/bash ../mail/mail.sh aming_test@163.com "$addr\_load:$load" `cat ../log/load.tmp`
fi
echo "`date +%T` load is $load"

502.sh内容（502肯定需要一个日志），502涉及到一个访问日志，访问日志又设计到一个时间。因为脚本监控主脚本是的是1分钟执行一次，所以502监控，看的肯定1分钟以前访问日志的时间，信息。

[root@hf-01 shares]# vim 502.sh

#! /bin/bash
d=`date -d "-1 min" +%H:%M`
c_502=`grep :$d:  $log  |grep ' 502 '|wc -l`
#截取一分钟以前的时间
if [ $c_502 -gt 10 ] && [ $send == 1 ]; then
     echo "$addr $d 502 count is $c_502">../log/502.tmp
     /bin/bash ../mail/mail.sh $addr\_502 $c_502  ../log/502.tmp
#mail就是定义发送给谁，发送的主题，发送的内容
fi
echo "`date +%T` 502 $c_502"

disk.sh内容（磁盘使用率），disk，思路就是挨个把分区看下

[root@hf-01 shares]# vim disk.sh

#! /bin/bash
##Writen by aming##
rm -f ../log/disk.tmp
for r in `df -h |awk -F '[ %]+' '{print $5}'|grep -v Use`  
#[ %]+  以 多个，空格 或者 %   作为分隔符，+号表示一个或多个；因为系统默认是英文，所以grep -v Use 过滤掉的就是 已用
do
    if [ $r -gt 90 ] && [ $send -eq "1" ]
then
    echo "$addr `date +%T` disk useage is $r" >>../log/disk.tmp
fi
done

if [ -f ../log/disk.tmp ]
then
    df -h >> ../log/disk.tmp
    /bin/bash ../mail/mail.sh $addr\_disk $r ../log/disk.tmp
    echo "`date +%T` disk useage is nook"
else
    echo "`date +%T` disk useage is ok"
fi

awk指定多个分隔符

[root@hf-01 shares]# echo "12:aa#123bb:22#ww" |awk -F '[:#]' '{print $3}'
123bb

[root@hf-01 shares]# echo "12:aa#123bb:22#ww" |awk -F '[:#]' '{print NF}'
5
[root@hf-01 shares]# echo "12:aa#123bb:22##ww" |awk -F '[:#]' '{print NF}'
6
[root@hf-01 shares]# echo "12:aa#123bb:22##ww" |awk -F '[:#]+' '{print NF}'
5
[root@hf-01 shares]#

20.23/20.24/20.25 告警系统邮件引擎

创建发邮件的脚本——mail.py

[root@localhost mail]# pwd
/usr/local/sbin/mon/mail

[root@localhost mail]# vim mail.py
#!/usr/bin/env python
#-*- coding: UTF-8 -*-
import os,sys
reload(sys)
sys.setdefaultencoding('utf8')
import getopt
import smtplib
from email.MIMEText import MIMEText
from email.MIMEMultipart import MIMEMultipart
from  subprocess import *
def sendqqmail(username,password,mailfrom,mailto,subject,content):
    gserver = 'smtp.163.com'
    gport = 25
    try:
        msg = MIMEText(unicode(content).encode('utf-8'))
        msg['from'] = mailfrom
        msg['to'] = mailto
        msg['Reply-To'] = mailfrom
        msg['Subject'] = subject
        smtp = smtplib.SMTP(gserver, gport)
        smtp.set_debuglevel(0)
        smtp.ehlo()
        smtp.login(username,password)
        smtp.sendmail(mailfrom, mailto, msg.as_string())
        smtp.close()
    except Exception,err:
        print "Send mail failed. Error: %s" % err
def main():
    to=sys.argv[1]
    subject=sys.argv[2]
    content=sys.argv[3]
##定义QQ邮箱的账号和密码，你需要修改成你自己的账号和密码（请不要把真实的用户名和密码放到网上
公开，否则你会死的很惨）
    sendqqmail('asdgsfsdl@163.com','sdfsd2.','asdgsfsdl@163.com',to,subject,content)
if __name__ == "__main__":
    main()


#####脚本使用说明######
#1. 首先定义好脚本中的邮箱账号和密码
#2. 脚本执行命令为：python mail.py 目标邮箱 "邮件主题" "邮件内容"

创建邮件引擎的配置文件

#本脚本用于做告警收敛
#Written by Adai
log=$1
t_s=`date +%s`
#时间戳1
t_s2=`date -d "2 hours ago" +%s`
#时间戳2（两个小时之前的时间）
#定义该时间戳的目的是保证第一次执行该脚本时v大于一小时
#保证第一次执行的时候能报警
#因为只有发生故障的时候才会执行该脚本，所以第一次执行必须要报警
if [ ! -f /tmp/$log ]
then
    echo $t_s2 > /tmp/$log
fi
#创建记录时间戳的日志文件
t_s2=`tail -1 /tmp/$log|awk '{print $1}'`
echo $t_s>>/tmp/$log
v=$[$t_s-$t_s2]
#两个时间戳的间隔时间
echo $v
#计时器：
if [ $v -gt 3600 ]
then
#如果时间间隔大于1小时，则启动报警系统
    ./mail.py  $1  $2  $3
    echo "0" > /tmp/$log.txt
#$log.txt为计数器文件：
else
    if [ ! -f /tmp/$log.txt ]
    then
        echo "0" > /tmp/$log.txt
    fi
#查看计数器文件中的数字
    nu=`cat /tmp/$log.txt`
    nu2=$[$nu+1]
    echo $nu2>/tmp/$log.txt
#重置$log.txt数值
    if [ $nu2 -gt 10 ]
    then
#告警收敛：该故障持续十分钟，开始报警
         ./mail.py  $1 "trouble continue 10 min $2" "$3"
         echo "0" > /tmp/$log.txt
#告警结束后重新开始计数
    fi
fi

20.26 运行告警系统

执行告警系统，将告警任务写入计划任务中，每分钟执行一次。

[root@localhost mail]# crontab -e
* * * * * cd /usr/local/sbin/mon/bin; bash main.sh

zanghaos

关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
复制链接

分享到 QQ

分享到新浪微博

扫一扫