【jenkins】第六篇: gitlab+jenkins+rancher+k8s+harbor的CI/CD实现

已于 2023-08-03 09:49:01 修改
阅读量1.0k 收藏 10
点赞数 1
分类专栏： # Jenkins 文章标签： jenkins gitlab rancher
于 2023-08-02 17:55:48 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_47055136/article/details/132067384
版权

文章目录

gitlab+jenkins+rancher+k8s+harbor的CI/CD实现

一、先了解几个基本概念

  • 持续集成（Continuous integration）：

    在软件开发环境中集成（Integrating）、构建（building）和测试（ testing）代码。

  • 持续交付（Continuous Delivery）:持续交付意味着构建好的软件可以随时发布到生产环境中。

    但通常情况下，组织更喜欢较慢的部署速率，因此发布决策是根据情况逐案（case by case）做出的。

  • **部署（ deploymen）：**将任何服务组件移动到任何环境中。

    在一些组织中，“供应/配置（provisioning）”一词是指对基础架构的部署，而部署一词仅指软件部署，不过在当前介绍的情况下，“部署”一词同时兼具这两层含义，即部署即包括IT基础设施硬件的安装配置，也包括对应用系统软件版本的部署。

  • 持续部署（Continuous deployment）:变更会通过流水线自动发布到生产环境中,每天可以进行多次生产部署。

    持续部署依赖持续交付。

  • 部署管理（ Deployment Management）：

    部署管理实践的目的在于将新的或变更的硬件、软件、文档、流程或其它服务组件移至生产环境中。

    但是，部署不仅仅是生产环境的部署，可以涉及将组件部署至不同环境，以用于测试或预发布。

  • 环境（Environment）：

    用于特定目的IT基础设施的子集，比如包括服务器、中间件、数据库、网络等。

    常见的环境包括：开发/集成环境、测试环境、预发布环境、生产环境。

  • 发布（Release）：某一服务或其它配置项或者一系列配置项可供（最终用户）使用的一个版本。

  • 发布管理（Release management）：发布管理实践的目的在于提供新的和变更的服务与特性以供（最终用户）使用。

二、架构说明

  • 架构图

在这里插入图片描述

  • 架构图说明

    （1）git通过分支区分环境；

    （2）开发人员提交代码到对应分支，触发webhook；

    （3）jenkins拉取代码，进行代码扫描（Sonar Qube）—>编译构建（maven、nodejs、npm）—>镜像构建（docker）—>镜像推送（harbor）—>rancher redeploy 触发rancher部署；

    （4）rancher部署服务至k8s集群；

    （5）ingress&nginx代理服务至互联网；

    （6）构建结果通过钉钉通知。

  • 回滚措施

    • 方式一：git回滚代码，自动触发流水线构建
    • 方式二：rancher执行服务回滚，回滚服务到指定版本

三、组件描述

  • 持续集成（Continuous Integration）

    • gitlab

      （1）项目代码、配置文件管理

      （2）Dockerfile管理

    • harbor

      （1）镜像存储管理

      （2）版本管理

    • jenkins

      （1）代码拉取、检测、打包、测试

  • 持续交付（Continuous Delivery）

    • rancher+K8S

      （1）容器编排管理

      （2）服务伸缩

      （3）迭代交付

      （4）服务发现和负载均衡

      （5）健康检查和自我修复

  • 持续部署（Continuous deployment）

    • rancher+K8S

      不赘诉

    • jenkins

      （1）程序打包、镜像构建

      （2）流水线管理

      （3）集成CICD组件

  • 部署管理（ Deployment Management）

    • jenkins

四、环境准备

关于Gitlab、Harbor、Rancher、K8S的安装，请自行百度。

4.1 jenkins安装

参考：第一篇：jenkins安装与基础配置

4.2 jenkins插件

参考：第二篇：jenkins插件，文中所列插件全部安装即可。

4.3 Harbor

新建一个项目，访问级别设置为是公开。注意：设置公开后，下载镜像不需要认证。

4.4 Gitlab

对应项目根目录创建Dockerfile，例如：

  • java项目的

    #设置基础镜像
FROM 你的harbor基础镜像库/projectimages/jre:1.8
#维护人员信息
MAINTAINER RC
#设置镜像对外暴露端口
EXPOSE 8061
#将当前 target 目录下的 jar 放置在根目录下，命名为 app.jar，推荐使用绝对路径。
ADD target/certif-system-2.1.0.jar /certif-system-2.1.0.jar
# 设置环境变量
ENV JAVA_OPTS="-server -Xms512m -Xmx512m"
# 时区设置
RUN echo "Asia/Shanghai" > /etc/timezone
#执行启动命令
ENTRYPOINT exec java ${JAVA_OPTS} -Djava.security.egd=file:/dev/./urandom -jar /certif-system-2.1.0.jar

  • 前端vue项目的

    # 设置基础镜像
FROM nginx
#维护人员信息
MAINTAINER RC
# 创建文件目录
RUN mkdir /app
# 时区设置
RUN echo "Asia/Shanghai" > /etc/timezone
# 拷贝程序包
COPY ./dist /app
# 拷贝配置文件
COPY nginx.conf /etc/nginx/nginx.conf
# 一些验证文件
#COPY MP_verify_mve7iCCs4qRqoLx1.txt /app
# 设置镜像对外暴露端口
EXPOSE 80

4.5 K8S

k8s节点服务器上，修改docker配置，增加Harbor库地址。

vim /etc/docker/daemon.json

增加insecure-registries

{"insecure-registries": ["192.168.10.122"]}

重启服务

systemctl restart docker

4.6 jenkins

jinkins服务器上进行如下操作：

  1. 安装docker
  2. 安装git
  3. 修改docker配置，增加Harbor库地址(参考4.5 k8s节点服务器配置)
  4. 登录harbor(docker login 你的harbor地址不带http)

五、jenkins配置

5.1 凭证管理

见：第三篇：jenkins凭据管理

5.2 MAVEN设置

自动安装或者手动下载maven包，解压后在jenkins上配置对应路径即可
在这里插入图片描述
setting配置
在这里插入图片描述

5.3 nodejs设置

选择所需版本，自动安装即可
在这里插入图片描述

5.4 gitlab配置

在这里插入图片描述

六、jenkins任务构建（自由风格）

以构建一个自由风格的软件项目为例，其它类型大同小异。

6.1 General

General

  • 项目描述：不赘诉

在这里插入图片描述

  • 钉钉机器人：选择配置好的钉钉通知机器人，自带的模板能满足绝大部分需求。

    机器人设置详见：第四篇：jenkins设置钉钉机器人通知
    在这里插入图片描述

  • 构建管理：根据需求设置相关构建策略

    在这里插入图片描述

  • 参数化构建过程：添加字符参数，定义代码分支变量

    在这里插入图片描述

6.2 源码管理

  • 源码管理：选择git，填写项目git地址、gitlab凭证、分支名变量。

    在这里插入图片描述

6.3 构建触发器

  • 构建触发器：通过webhook自动触发构建，先勾选即可，后续再配置。

    在这里插入图片描述

6.4 构建环境

  • 版本管理器：勾选版本管理器，定义版本号变量，用于构建镜像的tag

    在这里插入图片描述

  • with Ant ：选择程序所需jdk环境

    在这里插入图片描述

6.5 Build Steps

  • maven环境：【增加构建步骤】–>【调用顶层Maven目标】

    在这里插入图片描述

    选择maven版本—>执行打包命令

    注意：目标栏不需要再输入mvn

    在这里插入图片描述

  • Docker Bulid and Push :【增加构建步骤】–>【Docker Bulid and Push】

    在这里插入图片描述
    在这里插入图片描述
    在这里插入图片描述

    填写说明：

    • ①Repository Name：harbor存储库地址
    • ②Tag：镜像标签
    • ③Docker Host URl：远程docker地址，可不填
    • ④Docker registry URL：镜像地址，及harbor地址
    • ⑤Registry credentials：harbor认证

  • Redeploy Rancher2.x Workload:【增加构建步骤】–>【Redeploy Rancher2.x Workload】,通过Redeploy Rancher2.x Workload插件，实现jenkins到k8s环境的CD流程。
    详见：第五篇：jenkins+rancher集成
    在这里插入图片描述

    ① rancherApi 凭证

    ② 工作负载api地址

    ③ 总是拉取镜像

    ④ 需要更新的镜像地址

6.6 构建后操作

  • Publish build status to GitLab：将生成状态发布到GitLab

    在这里插入图片描述

七、效果展示

  • 构建历史
    在这里插入图片描述
  • 日志查看
    在这里插入图片描述
  • GIt流水线
    在这里插入图片描述
西原一点红
关注
  • 1
    点赞
  • 踩
  • 10
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
jenkins 结合 rancher 部署 k8s 服务
u012954380的博客
12-23 2840
公司测试环境使用了 rancher 来管理 k8s 集群，项目管理使用的是 rancher 的流水线，提交代码到gitlab上面会自动触发构建，但是使用了一段时间后发现还是有很多问题， 1.性能不好，失败率很高 2.自定义构建步骤很麻烦 3.速度很慢 感觉rancher 流水线不够灵活，所以在尝试结合jenkins 来部署 rancher 上面的服务。感觉比rancher 流水线要好不少。这里简单介绍一下. 为了方便，rancher jenkins 是在虚拟机中创建的，代码仓库用的是github,
springboot:Docker + Jenkins + GitLab + SpringBoot＆SpringCloud + Maven自动构建与部署工程代码
03-15
1，docker常用命令使用 1.1 docker rm命令强制删除容器 docker rm -f 1.2 docker rmi命令强制删除扩展 docker rmi -f 1.3 docker build命令强制指定Dockerfile文件进行编译 docker build -t 镜像名称:镜像版本号-f Dockerfile文件目录 编译镜像的目录 1.4 docker标签和docker push命令结合的使用 将变为打一下标签，然后安照标签和版本号进行推送到私服里面，标签名就以服务名和版本号即可 docker tag 镜像名称:镜像版本号 私服URL地址/镜像名称:镜像版本号 推入到私服里面 docker push 私服URL地址/镜像名称:镜像版本号 1.5 docker save命令保存编译之后附加文件存放到指定路径 docker save 镜像名称 -o 保存文件
Jenkins+gitlab+k8s代码自动集成和发布到k8s集群手册
02-17
利用jenkins，gitlab，构建自动化的代码发布流水线，并自动部署到k8s集群中
jenkins+k8s+docker+harbor的ci、cd操作
07-13
jenkins+k8s+docker+harbor的ci、cd操作
K8S+Jenkins+Harbor+Docker+gitlab集群部署所需资源
02-20
K8S+Jenkins+Harbor+Docker+gitlab集群部署所需的所有资源
jenkins rancher 插件
06-01
jenkins 打包后，可通过此插件自动发布到rancher环境
Docker、Jenkins、Rancher自动化部署项目
qq_41569544的博客
05-15 2655
技术前提 在阿里云服务器centOS7.3版本虚拟机安装开发环境，也可以自己本机装虚拟机尝试。也有一定技术基 础前提，需要了解linux基础命令、Docker的运用，如：编写Dockerfile文件、Docker常用命令、卷挂载等。 一、安装 yum安装默认路径是/usr/local，如果需要指定路径如下： # 默认路径安装 yum install 安装对象 # 安装到指定路径 yum -c /etc/yum.conf --installroot=/opt/all_venv/ --releasever=.
Docker+Jenkins+Harbor+Rancher持续集成部署分布式项目
qq_57756904的博客
08-13 4015
Docker+Jenkins+Harbor+Rancher持续集成部署分布式项目
纯 k8s 部署实现 gitlab CICD 保姆级教程
C_Green_Hand的博客
03-14 5335
​gitlab-runner 是 gitlab 提供的一种执行 CICD pipline 的组件。它有多种执行器，每一个执行器都提供一种实现 pipline 的方式，例如：shell 执行器是使用 shell 指令实现，docker 执行器是使用 docker api 实现。其中，最有难度的一种是 kubernetes 执行器。这种执行器会使用 k8s api 来实现 CICD pipline。首先，runner 会通过 RBAC 认证获取到调用 k8s 集群 API 的权限。
Rancher+Jenkins+git实现项目快速发版
weixin_42840756的博客
07-12 1835
Rancher+Jenkins+docker+git实现项目快速发版 平时我们每次代码更新之后很多时候需要对服务器进行发版，来测试在生产环境的运行情况，现在一般使用的是docker镜像的形式，怎么方便怎么来嘛，不过一般项目发版的话会经历到以下几个步骤： idea上进行打包--------docker打包成镜像---------镜像上传到镜像仓库-------服务器从镜像仓库中拉取镜像-------运行镜像 看起来不怎么麻烦，如果项目多的话每次发版都超级浪费时间 为了方便，这里就介绍一下怎么利用rancher
iOS持续集成:Jenkins+GitLab+蒲公英
01-27
众所周知，现在App的竞争已经到了用户体验为王，质量为上的白热化阶段。用户们都是很挑剔的。如果一个公司的推广团队好不容易砸了重金推广了一个APP，好不容易有了一些用户，由于一次线上的bug导致一批的用户在使用中纷纷出现闪退bug，轻则，很可能前期推广砸的钱都白费了，重则，口碑不好，未来也提升不起用户量来了。静下心来分析一下问题的原因，无外乎就是质量没有过关就上线了。除去主观的一些因素，很大部分的客观因素我觉得可以被我们防范的。根据大神们提出的一套开发规范建议，CI +TDD
Jenkins+Gitlab+K8S 构建自动化CI/CD发布流水线
04-01
利用jenkins，gitlab，构建自动化的代码发布流水线，并自动部署到k8s集群中。
Docker+Jenkins+GitLab+Maven+Harbor+SpringBoot自动化构建
06-10
1. Docker+Jenkins+GitLab+Maven+Harbor+SpringBoot自动化构建+Jenkins自动化部署配置 2.无须运维部署 ，而是相关的开发人员，测试人员登录jenkins传入需要部署的tag即可，整个部署过程无须运维参与，解放运维劳动力
【翻译】Elasticsearch Java API Client 8.13.2 （第四章-使用 Java API 客户端）
qq_49444793的博客
04-27 1064
Java API 客户端提供了多种索引数据的方法：您可以提供将自动映射到 JSON 的应用程序对象，也可以提供原始 JSON 数据。在下面的示例中，我们运行一个聚合，为名称与用户提供的文本匹配的产品从产品索引创建价格直方图。要创建此请求，可以方便地为主请求使用构建器对象，并为每个操作使用流畅的 DSL。如果您是 Elasticsearch 的新手，请务必阅读 Elasticsearch 的快速入门，其中提供了很好的介绍。在下面的示例中，我们使用产品的 SKU 作为索引中的文档标识符，在。
【Jenkins】持续集成与交付 （八）：Jenkins凭证管理（实现使用 SSH 、HTTP克隆Gitlab代码）
✨ 欢迎来到【Seal ^_^ 的CSDN博客】！这里是我记录技术心得、分享经验的地方。✨
04-29 2302
🟣【Jenkins】持续集成与交付 （八）：Jenkins凭证管理（实现使用 SSH 、HTTP克隆Gitlab代码）
【Jenkins】持续集成与交付 （四）：修改Jenkins插件下载地址、汉化
✨ 欢迎来到【Seal ^_^ 的CSDN博客】！这里是我记录技术心得、分享经验的地方。✨
04-28 1756
🟣【Jenkins】持续集成与交付 （四）：修改Jenkins插件下载地址、汉化
jenkins汉化不完全问题解决
小西的博客
04-29 828
jenkins插件汉化不完全问题
Jenkins持续化集成
最新发布
weixin_43784341的博客
04-30 427
下面是一个简单的示例，介绍如何在Jenkins中设置一个基本的持续集成流程。请注意，这只是一个简单的示例。实际上，持续集成流程可能会更加复杂，涉及到更多的构建步骤、测试、部署等。因此，根据你的具体需求，你可能需要对这个示例进行进一步的定制和扩展。在Jenkins中，首先确保安装了Git插件和其他必要的插件，例如Pipeline插件（如果你想要使用Pipeline来定义你的持续集成流程）。假设你已经在Jenkins中创建了一个名为"MyProject"的任务，并且该项目使用了Git作为版本控制系统。
【翻译】Elasticsearch Java API Client 8.13.2 （第三章-API约定）
qq_49444793的博客
04-27 1032
Java API 客户端使用非常一致的代码结构，使用现代代码模式，使复杂的请求更容易编写，复杂的响应更容易处理。以下部分详细解释了这些内容。包结构和命名空间客户端Elasticsearch API 很大，并且被组织成 功能组，如 Elasticsearch API 文档中所示。Java API 客户端遵循以下结构：功能组称为“命名空间”，每个命名空间位于的子包中。每个命名空间客户端都可以从顶级 Elasticsearch 客户端访问。唯一的例外是“搜索”和“文档”API，它们位于core。
k8s jenkins gitlab harbor
03-16
k8s是Kubernetes的缩写，是一个开源的容器编排平台，用于自动化部署、扩展和管理容器化应用程序。 Jenkins是一个开源的持续集成和持续交付工具，用于自动化构建、测试和部署软件。 GitLab是一个基于Git的代码托管平台，提供代码管理、版本控制、协作开发、CI/CD等功能。 Harbor是一个开源的企业级Docker镜像仓库，用于存储、管理和分发Docker镜像。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值