记一次 Gitlab CI/CD 取消 job 后后续任务 pending 的解决

最新推荐文章于 2024-07-11 18:42:36 发布
最新推荐文章于 2024-07-11 18:42:36 发布
阅读量3.4k 收藏
点赞数
分类专栏： 运维 文章标签： gitlab ci/cd gitlab-runner
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/DongGeGe214/article/details/117025214
版权

目录

一、问题背景

问题环境

  • gitlab: GitLab Enterprise Edition 11.4.12-ee
  • gitlab-runner: 13.11.0 (7f7a4bb0)

重现步骤

  1. 触发 gitlab ci，将 running 状态下的 job cancel
  2. 重新触发 gitlab ci，发现 job 状态为 pendding.

熟悉 gitlab 的同学可能一眼就能发现问题了，简单来说就是，runner 版本太新了。

二、问题排查

1. 登录 runner 所在服务器，查看 log，获取线索

从日志来看，runner 收到了 job cannel 的消息，也停止了 job，但后续，runner 提交 job 状态给 gitlab 失败，一直重试…
在这里插入图片描述

2. 尝试重启 runner 服务，看 pending 任务是否能够变为 running

重启 runner 后，pending 的 job 变为了 running，万能的重启大招啊，但重启只能一时爽，如果想要一直爽，那不就一直…
不行，不行，受不了~
在这里插入图片描述

3. 将 WARNING 日志放到网上所搜

找到一个类似的案例
在这里插入图片描述
结合公司 gitlab 版本查看，很幸运，版本正如上图所述，低于 11.5
在这里插入图片描述

三、解决办法

1. 升级 GitLab 版本

这个方案有权限、不怕跑路的小伙伴可以试试。

2. 降级 Runner

  • 查询 gitlab 发布历史，公司使用的版本的发布时间应该在2019年
    https://gitlab.com/gitlab-org/gitlab/-/blob/master/changelogs/archive-11.md#1149-2018-12-03
  • 查询 gitlab-runner 发布历史，查找 2019 年相应的 gitlab-runner，选择 v11.11.2 进行尝试
    https://gitlab.com/gitlab-org/gitlab-runner/-/releases?after=eyJpZCI6IjgxMjAxNSJ9
  • 重试复现步骤， cancel job，再新建 job，pending 变为了 running，问题解决
蘑菇猎手
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
K8S部署Java项目（Gitlab CI/CD自动化部署终极版）
分享式获得也是一种学习的态度
02-26 4935
每个人都有惰性，但不断学习是好好生活的根本，共勉！
极狐GitLab CI/CD 如何做自动停止旧的流水线
知无涯
05-08 4052
在日常的流水线部署中，我们经常会遇到频繁地推送代码的场景。 如：一个分支，3个人在一分钟内都合并了一次，那么就会触发三次流水线，虽然触发三次流水线没有问题，但我们有时想要一个自动取消多余流水线的功能。需求的意思就是 如果当前有pengding或者running的流水线，此时又有新的流水线被触发，那么我们期望能够自动取消旧的流水线，一是保证资源的合理利用，二是保证不会出现部署旧的流水线的内容。 那么在gitlab ci/cd中具体该怎么做那？ 一图胜千言。 设置完这个属性后， 运行一段时间，你又会发现新的问
gitlab 新工程 commit一直pending的解决办法
宫凯宁的博客
03-12 3万+
现象： gitlab迁移后新增的project 1、提交代码后一直处于pending状态。 2、进入页面提示没有可用的gitlab-runner。 3、.gitlab-ci.yml not found in this commit. 原因： 从8.0版开始，GitLab 持续集成（CI）完全集成到GitLab本身，并在所有项目中默认启用。 解决办法： 查看gitlab的版本： cat /opt...
gitlab-runner一直处于pending状态原因分析
热门推荐
SoftwareMan
09-19 4万+
项目触发runner，一直处于pending 初步怀疑是runner卡住了，也有可能是因为服务器资源不足，在服务器上执行gitlab-ci-multi-runner list发现runer还在， 在执行gitlab-ci-multi-runner verify，发现runer还活着，但是就是一直不执行流程 有两个方法解决：     1、执行gitlab-ci-multi-runner ru...
gitlab ci/cd
最新发布
weixin_45942304的博客
07-11 727
CI（持续集成，CD（）持续部署（也包含了持续交付的意思）。lint检查，检查代码是否符合规范自动运行测试，检查代码是否能通过测试这个过程我们可以称之为 CI，也就是持续集成，这个过程是自动化的，也就是说我们不需要手动去执行这些操作，只需要提交代码，这些操作就会自动执行。CD 指的是在我们 CI 流程通过之后，将代码自动发布到服务器的过程，这个过程也是自动化的。在有了前面 CI 的一些操作之后，说明我们的代码是可以安全发布到服务器的，所以就可以进行发布的操作。
Gitlab CI 一直pending
waiwaiLILI的专栏
10-12 8183
触发gitlab ci pipeline后，pipeline一直是pending状态： 1. 检查gitlab runner是绿色在线状态 2. 查看pipeline 详细信息 无任何报错提示，说明已经找到了对应的runner，不是.gitlab-ci.yml文件里面tag没有打对的问题 3. 我的是debian的linux操作系统，用一下命令重启gitlab-runner syste...
gitlab-runner一直处于pending
weixin_43507159的博客
10-25 3110
标题gitlab-runner一直处于pending 解决：执行gitlab-ci-multi-runner restart 重启runner，发现他会自动去执行触发runner的任务
GitLab Runner 当一个提交执行失败后，接下来的提交一直处于等待状态 （问题解决）
Swing
07-25 2971
问题描述： GitLab Runner 当一个提交执行失败后，接下来的提交一直处于等待状态 （问题解决） 解决方法： 在注册Runner时候，如果有如下这一步，请选择：true # 这里选择 true ，可以用于代码上传后直接执行(可能没有这一步) Whether to run untagged builds [true/false]: true 不过有些版本的Runner却没有这一步，因此，需要在绑定后在GitLab上进行设置，步骤如下： 勾选如下即可： ...
GitLab Runner 安装
林一怂儿
03-31 280
docker-compose.yml version: '3' services: gitlab-runner: container_name: docker_gitlab-runner image: gitlab/gitlab-runner volumes: - /var/run/docker.sock:/var/run/docker.sock - ./config:/etc/gitlab-runner
gitlab ci gitLab CI/CD自动化部署
尼古拉斯鹏
05-30 1239
修改gitlab.yml 1.创建一个GitLab CI用户： sudo useradd --comment 'GitLab Runner' --create-home gitlab-runner --shell /bin/bash 切换到gitlab-runner用户下生成sshkey,并把gitlab-runner的sshKey添加到gitlab上 不然会出现权限问题 su...
Ubuntu16.04安装gitlab runner并配置CI
梦中随笔
06-30 3272
Ubuntu16.04安装gitlab runner并配置CI 持续集成 GitLab-CI GitLab-CI就是一套配合GitLab使用的持续集成系统（当然，还有其它的持续集成系统，同样可以配合GitLab使用，比如Jenkins）。而且GitLab8.0以后的版本是默认集成了GitLab-CI并且默认启用的。.gitlab-ci.yml的脚本解析就由它来负责。 GitLab-Runner GitLab-Runner是配合GitLab-CI进行使用的。一般地，GitLab里面的每一个工程都会定义一个属于
sameersbn/gitlab迁移gitlab-ce升级
m0_60696455的博客
09-01 2043
区别 sameersbn和gitlab-ce相比 sameersbn是为docker打造的,并且没有集成redis等组件 理论性能更佳 参考文档 升级文档 https://docs.gitlab.com/ee/update/ 版本升级 https://github.com/sameersbn/docker-gitlab#upgrading 修复文档 https://docs.gitlab.com/ee/raketasks/backup_restore.html#reset-runner-
GitLabCI： Pipeline pending的原因有哪些？
DevOps持续集成的博客
05-05 3647
【DevOps】Gitlab CI/CD
Ezrealer的博客
08-10 947
安装 gitlab-runner https://docs.gitlab.com/runner/install/linux-repository.html curl -L "https://packages.gitlab.com/install/repositories/runner/gitlab-runner/script.rpm.sh" | sudo bash sudo yum install gitlab-runner sudo gitlab-runner register
[Gitlab CI] 自动取消旧流水线
锡城小凯的博客
03-04 963
当某一分支开启后只要提交一次commit就会自动创建一个新的流水线，此时之前的Pipeline不会被取消，经过下面的设置后可以实现自动取消旧流水线的功能。设置 > CI/CD流水线通用设置自动取消多余的流水线自动取消冗余流水线step-1step-2JobJob。
记录gitlab仓库搭建
z_orz_d的博客
11-06 233
记录gitlab仓库搭建。 介绍 GitLab 是一个用于仓库管理系统的开源项目，使用Git作为代码管理工具，并在此基础上搭建起来的web服务。可通过Web界面进行访问公开的或者私人项目。它拥有与Github类似的功能，能够浏览源代码，管理缺陷和注释。可以管理团队对仓库的访问，它非常易于浏览提交过的版本并提供一个文件历史库。团队成员可以利用内置的简单聊天程序(Wall)进行交流。它还提供一个代码片段收集功能可以轻松实现代码复用。 离线下载rpm包 Gitlab的rpm包集成了它需要的软件，简化了安装步骤，所
.gitlab-ci.yml文件常用规则说明
12-07 1944
我自己整理了一份yml文件，里面包含了分支触发，和tag触发，还有缓存等： gitlab-ci.yml参数列表其中，only字段可以用于设置pipline触发时机，比如：表示只有dev分支变动了才会触发执行： 表示只有打tag标签才会触发：随便打了一个first的tag，就出发了build的执行 表示只有tag标签开头是dep-的才会触发执行 : 打了一个dep-1.1触发了build和deploy的执行： 更详细的参数内容: 公司域名/help/ci/yaml/READMEConfigurati
Gitlab CI/CD使用-GitlabRunner
There is no one l would rather be than me
03-04 2434
1、安装gitlab runner runer是一个任务执行器，我们可以在任意一个可访问的地方安装runner，并注册到我们的gitlab系统中，这样我们就能使用gitlab ci/cd功能只进行持续集成构建项目了 可以直接在linux安装，也可以使用docker方式安装，下面是docker 1.1 安装 #创建目录放置配置 mkdir -p /data/gitlab-runner/config #启动docker容器，如果镜像不存在会自动拉取 docker run -itd -......
GitLab CI/CD
zzy979481894的博客
12-25 1237
官方文档：https://docs.gitlab.com/ee/ci/index.html GitLab CI/CD是GitLab提供的持续集成/部署工具，持续集成(CI)在每次向仓库push代码、合并到主分支前时执行构建和测试脚本，持续部署(CD)在每次向主分支push代码时将应用部署到服务器 GitLab CI/CD通过仓库根目录下一个名为.gitlab-ci.yml的文件进行配置，该文件创建了一个pipeline，一个pipeline由一个或多个顺序执行的stage组成，每个stage包含一个或多个并
发送请求到 /browser/perfData后问什么一直在pending
07-13
当你发送一个请求到`/browser/perfData`并且它一直处于"pending"状态时，这可能有几个原因导致： 1. 服务器响应延迟：服务器可能在处理其他请求或执行某些任务，导致响应时间较长。在这种情况下，你可以等待一段时间，看看是否会得到响应。 2. 网络连接问题：可能存在网络连接问题，导致请求无法到达服务器或从服务器返回。你可以检查你的网络连接是否正常，尝试刷新页面或重新发送请求。 3. 请求被阻塞：请求可能被服务器或中间件阻塞。这可能是由于服务器配置、安全策略、资源限制等原因导致的。你可以联系服务器管理员或开发团队，了解是否有任何阻塞请求的配置或限制。 4. 请求处理时间过长：如果请求需要处理大量数据或执行复杂的操作，可能需要一些时间来完成。这取决于服务器性能和负载情况。你可以等待一段时间，看看是否会得到响应。 5. 代理配置问题：如果你的请求需要经过代理服务器，可能存在代理配置问题导致请求无法正确转发或返回。确保代理服务器配置正确，并与相关管理员或开发团队联系以解决问题。 如果问题仍然存在，建议检查服务器端的日志和错误消息，以获取更多关于请求处理过程中发生的问题的信息。另外，提供更多的上下文信息，例如请求代码、服务器配置等，有助于更准确地定位问题所在。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值