gitlab容器prometheus和sidekiq日志增长过快的一种解决方案

最近发现一台服务器docker容器所占磁盘空间巨大，排查发现是git容器日志增长过快，约每天增长数十G。查看日志内容，发现其中prometheus和sidekiq极多，这些都是我们目前没有用到的组件。gitlab管理界面上将其关闭时出错，于是通过修改配置文件解决。

备份gitlab配置文件：

cp /docker/gitlab/etc/gitlab/gitlab.rb /docker/gitlab/etc/gitlab/gitlab.rb.bak

修改配置文件

参考：https://docs.gitlab.com/ee/administration/monitoring/prometheus/
编辑配置文件：vim /docker/gitlab/etc/gitlab/gitlab.rb

• 禁用prometheus：

prometheus_monitoring['enable'] = false

• 禁用sidekiq的prometheus metrics：

sidekiq['metrics_enabled'] = false

重新配置gitlab

运行docker exec -it gitlab /bin/bash进入容器
执行如下命令，查看prometheus组件状态及执行重新配置

gitlab-ctl status
gitlab-ctl reconfigure
gitlab-ctl status

检验结果

• 查看日志输出
  运行gitlab-ctl tail，发现 /var/log/gitlab/sidekiq/current 下的json格式日志依然很多，都是INFO级别的，目前看官方文档没法相关说明，配置文件gitlab.rb里也没有设置sidekiq的日志级别的选项。

• 查看日志大小
  观察/var/lib/docker/containers/28xx/28xx.log，没有发现prometheus和sidekiq的日志，日志10分钟增长约500KB，预计一天增长72MB。

• 结论
  问题初步解决。