Nginx实现大日志文件切割

 

方式一:

nginx cronolog日志分割配置文档,根据下面方法,每分钟分割一次NGINX访问日志。

1.nginx日志配置

 access_log access_log /data/access_log_pipe main;

 

2.先创建一个命名管道

mkfifo /www/log/access_log_pipe

3.配置cronolog:

nohup cat /data/access_log_pipe | /usr/local/sbin/cronolog /data/log/domain.access_%Y%m%d%H%M.log &

4.启动Nginx

/usr/local/nginx/sbin/nginx

 

注意:

cronolog必须在nginx启动前启动

没有安装cronolog的话,需要先安装

wget http://cronolog.org/download/cronolog-1.6.2.tar.gz

tar zxvf cronolog-1.6.2.tar.gz

cd cronolog-1.6.2

./configure
 make
make install

 

方式二:

定时任务中每小时添加定时任务,执行一下脚本,可以实现小时日志分割

log_dir="/var/log/nginx"

date_dir=`date +%Y/%m/%d/%H`

/bin/mkdir -p ${log_dir}/${date_dir} > /dev/null 2>&1

/bin/mv ${log_dir}/access.log   ${log_dir}/${date_dir}/access.log

kill -USR1 `cat /opt/nginx/logs/nginx.pid`

 

方式三:

使用logrotate做nginx日志轮询

logrotate看名字就知道是专门做日志轮询的,只把任务配置放在/etc/logrotate.d/下,任务就会自动完成,而且无需安装,系统自带,比较推荐使用. 

vi /etc/logrotate.d/nginx  

 

  1. /usr/local/nginx/logs/www.willko.cn.log /usr/local/nginx/logs/nginx_error.log {
  2. notifempty
  3. daily
  4. sharedscripts
  5. postrotate
  6. /bin/kill -USR1 `/bin/cat /usr/local/nginx/nginx.pid`
  7. endscript
  8. }

多个日志以空格分开, 
notifempty 如果日志为空则不做轮询 
daily 每天执行一次 
postrotate 日志轮询后执行的脚本 
这样,每天都会自动轮询,生成nginx.log.1-n  

 

 后话:

用Jmeter对方法一进行了测试,新建线程组:线程数200,循环150,新建http请求,请求nginx上的图片,请求30000次,失败326次,后台形成5个文件,行数如下:

   2868 access_201112182030.log
   7777 access_201112182031.log
   7626 access_201112182032.log
   7873 access_201112182033.log
   3530 access_201112182034.log
  29674 total

并没有因为切分文件而丢失日志。

评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值