解决Gitlab Prometheus导致的磁盘空间不足问题

已于 2024-01-03 09:30:56 修改
阅读量2.9k 收藏 11
点赞数 13
分类专栏： 工具使用 文章标签： gitlab prometheus
于 2024-01-03 09:09:17 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/IT_Holmes/article/details/135354866
版权
文章讲述了在使用GitLabDocker部署时，由于Prometheus监控数据积累导致磁盘空间爆满的问题，解决方法包括备份数据、清理wal文件、调整Prometheus配置以减少数据保留期限，以及重启GitLab服务。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

解决Gitlab Prometheus导致的磁盘空间不足问题

用docker搭建了一个gitlab服务，已经建立了多个项目上传，但是突然有一天就503了。
df -TH查看系统盘，发现已经Used 100%爆满了。。。

💡Tips：/dev/vda1目录是系统盘目录。

image.png
去云服务器上面看，短短半个月就占满了整个系统盘。。。
image.png

然后，看了看gitlab容器卷挂载目录data中，有一个prometheus目录居然占了29G，百度了一下，原来这个是用来监控的。。。所以，内容一直堆积堆积，导致磁盘满了。。。

GitLab中的 Prometheus 解释如下：
GitLab中的Prometheus是一个用于监控和报警的开源系统，它能够收集并汇总时间序列数据，用于检测异常。同时，GitLab还提供了一些关于Prometheus的基础功能，包括数据聚合、存储时间等。这些功能可以帮助用户更好地了解其系统运行状况，并及时发现和解决潜在问题。

/var/opt/gitlab/prometheus/data是

最低0.47元/天 解锁文章
GitLab：GitLab性能监控与优化_2024-07-18_03-26-21.Tex
12-02 178
在开始监控GitLab的性能之前，理解其关键性能指标至关重要。
解决 gitlab 因 Prometheus 磁盘占用过大的问题
Gblfy_Blog
09-13 3374
解决 gitlab 因 Prometheus 磁盘占用过大的问题
GitLab存储空间满了
江湖郎中
04-19 1665
在Ubuntu虚拟机中安装的GitLab，空间满了，GitLab用不了了。折腾了一天，新增分区找回了空间，给GitLab设置了新分区，终于搞定了。
Gitlab Prometheus 磁盘空间占用
小单的博客专栏
06-12 2130
gitlab 默认启用 Prometheus，数据存储时长是 15天，经观察磁盘占用较大（我这边平均每天1G）如果磁盘紧张的情况下可以修改数据保留时长，或直接关闭 Prometheus 监控，修改配置文件的方法如下：配置文件位置 1、修改保留天数，下面的配置内容默认全部是注释掉的，可以去掉前面的 # ，然后将15d修改为对应所需的数值即可。 2、直接关闭该功能，将配置文件中的 取消注释后修改为 最后重启 gitlab 即可，多余的文件会被自动删除。（END）...
Gitlab磁盘空间问题 针对Prometheus
陈建军
05-28 9665
Gitlab磁盘空间不够后，会导致git使用出现异常。一般网上搜索到的是针对gitlab的data配置进行转移，但是还有一种情况是prometheus的data也会占用一定的磁盘空间。我遇到的正是因为prometheus导致的磁盘空间不足。 linux（CentOS 6.5）下 1、先查看磁盘空间大小。确定是prometheus占用空间 du -h --max-depth=1 /var/opt/gitlab/ 2、修改gitlab中prometheus配置 ####################
GitLab从旧服务器迁移到新服务器(空间不足，gitlab安装报错)
Hui_Hong_TaiLang的博客
06-02 1490
例如：备份文件名为11684211114_2023_05_16_12.5.5_gitlab_backup.tar，则编号为11684211114_2023_05_16_12.5.5。默认将会在 /var/opt/gitlab/backups/ 目录下生成备份文件。最后检查新旧GitLab的内容，完全一模一样，迁移成功！根据提示输入自己新服务器的密码：xxxxxx。在提示中敲入“yes”继续。显示为 12.5.5。
解决GitLab因prometheus磁盘占用过大-并清理
峰羽
02-10 548
在Ubuntu22.04中搭建了gitlab私有服务器用于代码管理，突然发现其他服务无法运行了，通过排查发现为系统内存不足，原因是gitlab的prometheus监控文件导致,记录一下。
gitlab停止prometheus影响使用嘛
最新发布
04-05
例如，在调试失败的管道作业时，缺少实时性能统计可能会增加解决问题的时间成本。 #### 3. **磁盘空间释放效果** 由于 Prometheus 存储大量的时间序列数据，默认情况下确实可能导致较高的磁盘消耗[^3]。一旦禁用该...
修改gitlab默认仓库存储目录并迁移数据
march0310的博客
05-13 1711
修改gitlab默认仓库存储目录并迁移数据1. 服务器环境2. 迁移 gitlab 仓库数据3. 修改配置文件4. 以上操作命令总结5. gitlab 常用命令6. gitlab 默认目录 1. 服务器环境 当时安装gitlab时，未考虑太多，只是默认安装，默认存储库位置: /var/opt/gitlab/git-data/repositories。随着数据增多，/dev/mapper/centos-root Use% 100%，最终导致服务器停机。 挂载磁盘后，/home目录下的空间最大，决定将默认仓库存
GitLab 磁盘空间不足的处理(根文件系统扩容)
l_user的专栏
11-10 4890
公司的 git 服务器提示磁盘空间不足，无法提交代码。查看了一下磁盘空间，使用率达到了 100%。 之前安装 GitLab 的时候，仓库地址在其他分区，所以仓库位置不用更改。查看了一下大文件位置，发现是 postgresql 占据了空间。所以我尝试去修改 postgresql 数据库位置。 //先停止 gitlab gitlab-ctl stop //然后同步数据到其他分区 sudo rsync ...
ubuntu系统使用docker gitlab 磁盘空间满问题解决记录
一只海星的主页
02-16 1675
ubuntu docker gitlab 磁盘空间满问题记录 docker gitlab 服务器磁盘占满100%，找到问题完美删除释放离谱超大文件
gitlab备份空间不足解决方案
Hui_Hong_TaiLang的博客
06-02 1366
如果空间都不够，可以挂载一些磁盘，2T的就是新挂载的磁盘。
解决gitlab 迁移，磁盘空间不足问题处理
weixin_41908066的博客
06-15 2821
解决gitlab 磁盘空间不足问题处理 注：开始没有考虑到把gitlab划分好存储目录，占用系统磁盘，由于gitlab是默认安装的，随着公司代码越来越多，导致gitlab数据目录空间不足. 由于gitlab通过rpm包安装后，默认存储位置在**/var/opt/gitlab/git-data/repositories**，通常var分区很小，会打满. 磁盘空间： [root@bogon soft]# df -hT Filesystem Type Size Used Avail Us
linux 磁盘满了，gitlab Prometheus 来背锅
45°天空
12-16 3257
gitlab 占用磁盘空间非常大
三步解决gitlab 磁盘空间不足问题处理
热门推荐
会了就是会了
10-09 1万+
注：一开始没有考虑到把gitlab划分好存储目录，占用系统磁盘，由于gitlab是默认安装的，随着公司代码越来越多，导致gitlab数据目录空间不足. 由于gitlab通过rpm包安装后，默认存储位置在/var/opt/gitlab/git-data/repositories，通常var分区很小，会打满. 磁盘空间： [root@bogon soft]# df -hT Filesystem ...
一次Prometheus采集器内存占用过高（内存泄漏）问题排查及解决
SYN_ACK的博客
08-04 2029
我参与的一个项目使用了腾讯的云存储组件CSP。我们需要利用Proemtheus Exporter对改组件进行监控。由于没有找到相关的采集器，我们团队自己开发了一款CSP Exporter。该采集器由我所在团队的一位大佬开发出了初版。采集器上线两个月后，用户反馈该采集器占用了大量的系统内存，重启后该问题消失。此时该大佬已经离职另谋高就，排查该问题的任务落到了我的头上。经过一周的不懈努力，最终定位到并解决了该问题，以下是排查及解决的过程。
一次Git pull报了磁盘空间不足的排查与解决，Jenkins 的锅
SwellHuang的专栏
11-25 867
刚刚在更新git时报了个错，说在写log是磁盘空间不足。 查看服务器上的该gitlab日志文件，大小是4096k，开始还以为是gitlab上的配置限制了这个日志的文件的大小，查了各种gitlab的配置，都没找到。 后面试着查看服务器的空间大小，发现整个服务器都没空间了。 查看服务器磁盘占用情况命令为：du -h --max-depth=1 最终发现是Jenkins上的/var...
【监控学习6】prometheus数据存在本地磁盘，如何解决大量日志问题？
猿脑2.0的博客
07-17 921
Prometheus 是一款强大的开源监控工具，它通过拉取(pull)的方式来收集指标数据，并将这些数据存储在本地磁盘上。然而，随着时间的推移，存储容量问题可能会成为需要解决的问题。
Gitlab自动备份及磁盘占满问题处理
shang2468的专栏
02-24 1556
Gitlab自动备份 修改gitlab配置文件 打开/etc/gitlab/gitlab.rb #修改以下配置（根据需要修改） [root@git git_test]# vim /etc/gitlab/gitlab.rb gitlab_rails['manage_backup_path'] = true gitlab_rails['backup_path'] = "/home/backups" gitlab_rails['backup_keep_time'] = 604800 604800改成
如何使用Prometheus监控磁盘空间？
05-28
如果您想要监控磁盘空间使用情况，可以使用 Prometheus 的 Node Exporter 组件来收集指标数据。Node Exporter 是一款用于收集基本系统信息的 Prometheus Exporter。 以下是如何使用 Node Exporter 监控磁盘空间的...
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

xupengboo

你的鼓励将是我创作最大的动力。

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值