【Ceph】rgw通过nginx代理的日志处理

rgw 默认是通过 civetweb 来提供服务的，但是 civetweb 的日志太简陋了，一般都在上面搭建一层 Nginx 做转发，以获得更多的日志以及方便调节请求返回的参数。这里需要注意一下日志滚动的问题，以防 Nginx 的 access.log 太大而打爆磁盘，甚至影响 Nginx 本身的性能，这里主要是 Logrotate 的工作了。

Logrotate 大家都不陌生了，但我之前遇到的坑是本以为重装的机器默认安装了，但是结果没有，而默认的 Nginx 日志在 /var/log/nginx/ 下面，所以如果日志不滚动切割压缩的话，很容易把系统盘打满，所以这里要记得确认一下 Logrotate 是否安装了，另外一般服务器都会挂其他数据盘，把日志放到数据盘是更好的选择，比如所把 Nginx 和 Ceph 的日志改到 /data/log/ 下面。不过如果改了日志路径，但是忘记改 Logrotate 的日志，那也是白搭的，你的数据盘和 Nginx 迟早也要被 access.log 拖垮，所以必须要记得修改 Logrotate 的默认配置，如下图。

# cat /etc/logrotate.d/nginx
/data/log/nginx/*log {
    create 0664 nginx root
    daily
    rotate 10
    missingok
    notifempty
    compress
    sharedscripts
    postrotate
        /bin/kill -USR1 `cat /run/nginx.pid 2>/dev/null` 2>/dev/null || true
    endscript
}

改了日志路径了，是不是就 OK 了呢？正常来说是的，因为 Logrotate 会依赖 crontab 来定期执行任务，这是默认的 Logrotate 的定时任务。

# cat /etc/cron.daily/logrotate
#!/bin/sh

/usr/sbin/logrotate -s /var/lib/logrotate/logrotate.status /etc/logrotate.conf
EXITVALUE=$?
if [ $EXITVALUE != 0 ]; then
    /usr/bin/logger -t logrotate "ALERT exited abnormally with [$EXITVALUE]"
fi
exit 0

很明显，Logrotate 这个是一个每日执行的任务，所以你配置了日志路径和 Logrotate 的配置文件，可能也不会立刻就给你切割日志，这里还要注意看一下命令，因为 /etc/logrotate.conf 的配置文件里有去读取这个配置文件夹下面的配置文件，所以 /etc/logrotate.d/ 所以不用担心刚刚改的 Ceph 和 Nginx 的配置不生效，不信你看看，注意 include 的部分。

# cat /etc/logrotate.conf
# see "man logrotate" for details
# rotate log files weekly
weekly

# keep 4 weeks worth of backlogs
# rotate 4
# keep 99 weeks worth of backlogs (tlinux team <g_APD_SRDC_OS@tencent.com>)
rotate 99

# create new (empty) log files after rotating old ones
create

# use date as a suffix of the rotated file
dateext

# uncomment this if you want your log files compressed
#compress

# RPM packages drop log rotation information into this directory
include /etc/logrotate.d

# no packages own wtmp and btmp -- we'll rotate them here
/var/log/wtmp {
    monthly
    create 0664 root utmp
	minsize 1M
    rotate 25
}

/var/log/btmp {
    missingok
    monthly
    create 0600 root utmp
    rotate 25
}

当然了，你也可以手动触发一下，手动触发的操作这里就不介绍了，大家可以参考网上的其他文档。