背景:
在一次运维的工作,临时受理了一个开发一个自动清理日志脚本的工作,该工作内容的需求如下:
1、设置为每天晚上2点执行;
2、需要判断日志文件所在目录的磁盘使用率超过了75%则清理,没有超过则无需清理操作;
3、脚本执行的过程,需要打印日志;
4、清理的脚本需要安装日志生成量进行判断,较多则进行磁盘的判断,较少的无需要判断,保持20的。
shell脚本开发:
#!/bin/bash
#函数
findrm () {
find /app/logDBak/api/ -name "*.backup" -mtime +20 -exec rm {} \;
find /app/logDBak/api-web/ -name "*.backup" -mtime +20 -exec rm {} \;
}
log_output () {
if [ ! -f /app/logDBak/clean-back.log ]
then
cd /app/logDBak/
touch /app/logDBak/clean-back.log
fi
echo -e "\e[$1m[$(date +"%F %T")] $2 \e[0m"
}
for ((i=20;i>10;i--))
do
use=`df -h | grep /dev/mapper/vg00-app | awk -F" " '{print $5}' | awk -F"%" '{print $1}'`
if [ $use -ge 75 ]
then
find /app/logDBak/CUBE-api/ -name "*-backup.log" -mtime +$i -exec rm {} \;
find /app/logDBak/CUBE-api-web/ -name "*-backup.log" -mtime +$i -exec rm {} \;
find /app/logDBak/CUBEWY-api/ -name "*-backup.log" -mtime +$i -exec rm {} \;
find /app/logDBak/CUBECM-api/ -name "*-backup.log" -mtime +$i -exec rm {} \;
find /app/logDBak/CUBECMSK-api/ -name "*-backup.log" -mtime +$i -exec rm {} \;
find /app/logDBak/CUBECMSK-api-web/ -name "*-backup.log" -mtime +$i -exec rm {} \;
log_output 32 "Cleaned up the logs $i days ago " | tee -a /app/logDBak/clean-back.log >/dev/null 2>&1
findrm
else
log_output 32 " `date` not clean OlapDBak" | tee -a /app/OlapDBak/clean-back.log >/dev/null 2>&1
break
fi
done
执行验证:
使用bash -x clean-log.sh,就可以查看执行的过程
总结:
如上就是自动清理日志文件,但是需要考虑达到一定值之后,才触发清理,一般是达到80%之后就会监控报错了,需要人工进入,如上就可以在告警之后就清理日志,减少运维人员的工作量,实现了运维自动化。