日志对于网站来说,非常的重要,通常日志的处理有两种,一种是Hadoop离线处理,还有就是通过storm实现实时计算分析处理,但是日志过大,需要我们写脚本进行拆分日志文件。小型网站,一天已备份,就够了。对于大网站,可能一小时一备份
时间函数
#日期函数,获取昨天时间
/bin/date -d yesterday +%Y%m%d%H%M
/bin/date -d yesterday +%y/%m/%d/%H/%M
#!/bin/bash
#nginx安装地址
BASE_PATH=/usr/local/nginx
#日志文件名称
TARGET_LOG_FILENAME=demo_access.log
#写出的文件夹地址
OUT_PATH=/usr/local/nginx/demo_log
#当文件夹不存在就创建
if [ ! -d "$OUT_PATH" ]; then
mkdir $OUT_PATH
fi
#根据日期来创建日志文件的名称,这个是按照天进行分割
NEW_LOG_FILENAME=$(/bin/date -d yesterday +%Y%m%d)
#这个是按照分钟
#/bin/date -d yesterday +%Y%m%d%H%M
#20171108_demo_access.log 日志
OUT_PATH_FILENAME=$NEW_LOG_FILENAME"_"$TARGET_LOG_FILENAME
#停止nginx
$BASE_PATH/sbin/nginx -s stop
echo "创建日志文件"$NEW_LOG_FILENAME
echo $OUT_PATH/$OUT_PATH_FILENAME
#移动日志文件
cp $BASE_PATH/logs/$TARGET_LOG_FILENAME $OUT_PATH/$OUT_PATH_FILENAME
#启动nginx日志
$BASE_PATH/sbin/nginx
添加定时任务
#查看定时人物列表
crontab -l
#建立定时任务,打开一个编辑器,然后 里面编辑添加定时执行脚本命令
crontab -e
#每隔1分钟执行一次 task.sh文件
#每一个*代表的是一个时间单位,
#分钟 小时 日 月 年
*/1 * * * * /usr/local/nginx/task.sh
定时脚本命令
输入crontab -l
查询定时命令脚本
执行后的效果
可以看到目录的日志中,每隔一分钟,就会创建一个日志文件出来,老爽了
参考文章
shell判断文件是否存在: http://www.cnblogs.com/emanlee/p/3583769.html
定时任务物:http://www.cnblogs.com/0201zcr/p/4739207.html