使用jenkins流水线完成自动部署服务到K8s

最新推荐文章于 2024-06-23 22:51:04 发布
最新推荐文章于 2024-06-23 22:51:04 发布
阅读量1.2w 收藏 127
点赞数 14
分类专栏： devops 文章标签： jenkins docker linux
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_37069728/article/details/125976604
版权

说明

通过本文章，您可以轻松入门cicd过程。本地测试环境为springboot微服务项目。用户提交代码到gitlab，触发jenkins拉取gitllab上的代码，然后完成编译构建成jar包，同步完成sonarsqube代码质量检测。然后在jenkins内部完成生成镜像，并将镜像推送到harbor仓库中，然后通过K8s完成服务的部署。

依赖环境部署

环境准备

使用环境说明

使用的虚拟机环境centos7.9，使用vmware安装

同步主机时区为亚洲，并同步时间
[root@linux-node ~]# echo "ZONE=Asia/Shanghai" >> /etc/sysconfig/clock         
[root@linux-node ~]# rm -f /etc/localtime
#链接到上海时区文件       
[root@linux-node ~]# ln -sf /usr/share/zoneinfo/Asia/Shanghai /etc/localtime
关闭防火墙和selinux
[root@localhost ~]# systemctl stop firewalld
[root@localhost ~]# systemctl disable firewalld
Removed symlink /etc/systemd/system/multi-user.target.wants/firewalld.service.
Removed symlink /etc/systemd/system/dbus-org.fedoraproject.FirewallD1.service.
[root@localhost ~]# setenforce 0
[root@localhost ~]# sed -i "s/SELINUX=enforcing/SELINUX=disabled/g" /etc/selinux/config
设置yum源
wget -O /etc/yum.repos.d/CentOS-Base.repo  http://mirrors.aliyun.com/repo/Centos-7.repo
wget -O /etc/yum.repos.d/epel.repo  http://mirrors.aliyun.com/repo/epel-7.repo
yum clean all
yum makecache
安装docker

linux安装docker

创建数据目录将数据持久话到该目录下，以便后期好维护

mkdir -p /data

安装maven

linux安装maven

gitlab安装部署

docker安装gitlab

harbor安装部署

docker安装harbor

jenkins安装部署

docker安装jenkins

sonarqube部署

docker安装sonarsqube

k8s部署

部署过程略

创建java工程并测试将代码上传到gitlab仓库
gitlab上创建项目

在这里插入图片描述

创建springboot工程，并将代码提交到hello-test工程下

idea创建springboot项目

编写Jenkinsfile的方式

流水线语法

我们在编写jenkins流水线脚本时可以先将框架写好，然后再补齐内容。

pipeline {
    //指定任务在哪个集群节点上执行
    agent any
	//声明环境变量，方便后面使用
	environment {
	    key='value'
	
	}
		
    stages {
        stage('拉取git仓库代码') {
            steps {
                echo '拉取git仓库代码-SUCCESS'
            }
        }
		stage('通过maven构建项目') {
            steps {
                echo '通过maven构建项目-SUCCESS'
            }
        }
		stage('通过sonarqube做代码质量检测') {
            steps {
                echo '代码质量检测-SUCCESS'
            }
        }
		stage('通过docker制作自定义镜像') {
            steps {
                echo 'docker制作自定义镜像-SUCCESS'
            }
        }
		stage('将自定义镜像推送到harbor仓库中') {
            steps {
                echo '推送到harbor仓库-SUCCESS'
            }
        }
		stage('通过publish  over  ssh通知目标服务器') {
            steps {
                echo '通知目标服务器-SUCCESS'
            }
        }
    }
}

生成jenkins 流水线脚本

点击下方的流水线语法
在这里插入图片描述例如：我要从git上下载代码
在这里插入图片描述
下面填好之后
在这里插入图片描述
点击生成流水线脚本
在这里插入图片描述
把生成的脚本粘贴到对应的步骤下
在这里插入图片描述
这样就完成了流水线代码的生成。
可以在对应的stage处查看对应步骤的日志。
在这里插入图片描述

使用git维护Jenkinsfile文件

在gitlab一个项目中创建Jenkinsfile，可以在一个单独的项目中，也可放到对应项目中
在项目目录下创建Jenkinsfile文件，名称必须是这样的。J为大写的。
将内容放到该文件中
在这里插入图片描述
点击commit changes
这样工程根目录下就多了个Jenkinsfile文件，我们就可以在gitlab上去维护该文件了。
在这里插入图片描述
jenkins上配置使用gitlab上的Jenkinsfile
在这里插入图片描述
构建后发现多了该步骤
在这里插入图片描述

jenkins全局配置

管理Jenkins中点击
在这里插入图片描述

配置maven

手动配置：
主机上安装maven后将maven的安装目录移动到jenkins数据卷中
在这里插入图片描述
重命名文件夹
在这里插入图片描述
在页面上配置，MAVEN_HOME要使用容器内部目录，不要使用宿主机目录
在这里插入图片描述

配置jdk

在这里插入图片描述
页面配置jdk
在这里插入图片描述

使用 jenkins流水线完成cicd

新建任务，选择流水线

在这里插入图片描述

git下载代码到本地

在这里插入图片描述
下面填好之后
在这里插入图片描述
点击生成流水线脚本
在这里插入图片描述
把生成的脚本粘贴到对应的步骤下
在这里插入图片描述

通过maven构建项目

使用sh:shell script步骤
在这里插入图片描述
将生成的脚本粘贴到gitlab Jenkinsfile对应的步骤下
在这里插入图片描述

通过sonarqube做代码质量检测

在这里插入图片描述

通过docker制作自定义镜像

配置使得jenkins内部具有构建镜像能力 docker in docker配置

修改/var/run/docker.sock权限，使其属于root组，并且其他用户有读和写的权限
在这里插入图片描述
修改jenkins数据数据卷，jenkins内部要有执行docker命令的能力，需要将下面文件挂载到容器内部。
在这里插入图片描述

Jenkins docker-compose.yml文件

version: '3.1'
services:
  jenkins:
    image: jenkins/jenkins:2.319.1-lts
    container_name: jenkins
    ports:
      - 8090:8080
      - 8091:50000
    volumes:
      - /data/jenkins_home/:/var/jenkins_home/
      - /var/run/docker.sock:/var/run/docker.sock
      - /usr/bin/docker:/usr/bin/docker
      - /etc/docker/daemon.json:/etc/docker/daemon.json

由于之前使用docker run方式启动的jenkins，此时需要删除掉容器，不要删除之前创建的数据卷就可以，然后使用docker-compose方式启动，此时不会删除数据，以后推荐改成docker-compose方式，这样运维人员也知道你的启动时加了哪些参数了，易于维护。

docker  stop jenkins
docker  rm  jenkins
docker-compose  up -d

在这里插入图片描述
进入到容器内部，测试，发现成功。
在这里插入图片描述

生成构建镜像的jenkinsfile内容

在这里插入图片描述

将自定义镜像推送到harbor仓库中

在这里插入图片描述

使用K8s编排容器完成部署

准备部署的yaml文件

放到项目的根目录下，放到项目的根路径下

apiVersion: apps/v1
kind: Deployment
metadata:
  name: pipline-deployment
  namespace: dev
spec:
  replicas: 2
  selector:
    matchLabels:
      app: pipline-pod
  template:
    metadata:
      labels:
        app: pipline-pod
    spec:
      containers:
        - name: pipline
          image: 192.168.59.129:8888/hello/pipline-test:latest
          ports:
            - containerPort: 8080
---

apiVersion: v1
kind: Service
metadata:
  name: pipline-service
  namespace: dev
spec:
  selector:
    app: pipline-pod
  type: NodePort
  ports:
    - port: 30002
      targetPort: 8080
配置jenkins可以ssh连接到K8s master节点
系统配置里配置K8S主节点

在这里插入图片描述

在这里插入图片描述

将pipline.yaml文件传送到K8s-master节点上

在这里插入图片描述
生成代码放到Jenkinsfile文件中
在这里插入图片描述
查看K8s-master节点对应的目录里是否有pipline.yaml文件
在这里插入图片描述

在k8s-master节点上执行kubectl apply -f pipline.yaml 命令将服务部署起来
解决jenkins上执行ssh命令时需要输入密码问题

ssh无密码登录设置
docker exec -it jenkins bash
cd ~
mkdir .ssh
$ cd ~/.ssh
ssh-keygen -t rsa -C “email@example.com”
系统提示输入文件保存位置等信息，连续按三次回车即可，生成的SSH key文件的保存路径会在终端中给出：id_rsa id_rsa.pub
cat id_rsa.pub 将内容追加到k8s-master节点/root/.ssh/authorized_keys文件后面
验证
在jenkins容器内部验证，发现不用再输入密码了
在这里插入图片描述

配置远程执行命令

在这里插入图片描述
gitlab jenkinsfile增加以下步骤
在这里插入图片描述
测试验证，注意每次提交需要打tag，不修改pipline文件时并不会重新部署服务。
在这里插入图片描述

集成钉钉通知将部署结果发送到钉钉里

安装DingTalk插件

在这里插入图片描述

创建钉钉群，获取到webhook

创建过程略

系统配置钉钉

系统管理–系统配置
在这里插入图片描述
在这里插入图片描述

自动化ci操作

配置提交代码后jenkins自动拉取代码 （webhook配置）

需要安装gitlab插件
在这里插入图片描述
勾选下面当代码推送后触发构建
在这里插入图片描述

在gitlab上
在这里插入图片描述
在这里插入图片描述
点击下面的Add webhook后提示
不能填写本地主机的url允许本地地址构建webhook
在这里插入图片描述
需要在admin settings network 处勾选
在这里插入图片描述
重新添加
会在项目下看到webhook的地址
在这里插入图片描述
点击此处测试自动化构建

在这里插入图片描述
解决测试webhook返回403问题
在这里插入图片描述
解决：
在系统配置里将此处勾选去掉
系统管理 -> 系统设置 -> Enable authentication for ‘/project’ end-point
在这里插入图片描述

重新测试会发现jenkins已经开始自动构建了。

ps://img-blog.csdnimg.cn/09cfd85cec5944fb84c039cce83a5314.png)
解决构建过程中提交代码后然后发现没有改动的问题：
在这里插入图片描述
解决办法：
需要使用kubectl rollout命令重新滚动一次

 kubectl rollout restart deployment pipline-deployment -n dev

修改Jenkinsfile

在这里插入图片描述

自动化ci Jenkinsfile文件

pipeline {
    //指定任务在哪个集群节点上执行
    agent any
	//声明环境变量，方便后面使用
	environment {
	    harbor_user='admin'
        harbor_password='Harbor12345'
        harbor_addr='192.168.59.129:8888'
        harbor_repo='hello'
	
	}
		
    stages {
        stage('拉取git仓库代码') {
            steps {
               checkout([$class: 'GitSCM', branches: [[name: '*/main']], extensions: [], userRemoteConfigs: [[credentialsId: 'hello-demo', url: 'http://192.168.59.129:8099/root/hello-demo.git']]])
            }
        }
    
		stage('通过maven构建项目') {
            steps {
                sh '/var/jenkins_home/maven/bin/mvn  clean package -DskipTests'
            }
        }
		stage('通过sonarqube做代码质量检测') {
		steps {
            sh '/var/jenkins_home/sonar-scanner/bin/sonar-scanner   -Dsonar.sources=./   -Dsonar.projectname=${JOB_NAME}   -Dsonar.projectKey=${JOB_NAME} -Dsonar.java.binaries=./target/  -Dsonar.login=23adbf175860533b91bd72d5795ad4f74ab81989'
     
            }
        }
		stage('通过docker制作自定义镜像') {
            steps {
               sh '''mv ./target/*.jar  ./docker/
                docker build -t  ${JOB_NAME}:latest  ./docker/'''
            }
        }
		stage('将自定义镜像推送到harbor仓库中') {
            steps {
                sh '''docker login -u ${harbor_user} -p ${harbor_password} ${harbor_addr}
                docker tag ${JOB_NAME}:latest  ${harbor_addr}/${harbor_repo}/${JOB_NAME}:latest
                docker push ${harbor_addr}/${harbor_repo}/${JOB_NAME}:latest'''
            }
        }
		stage('将pipline.yaml传送到K8s-master节点') {
            steps {
            sshPublisher(publishers: [sshPublisherDesc(configName: 'k8s', transfers: [sshTransfer(cleanRemote: false, excludes: '', execCommand: '', execTimeout: 120000, flatten: false, makeEmptyDirs: false, noDefaultExcludes: false, patternSeparator: '[, ]+', remoteDirectory: '', remoteDirectorySDF: false, removePrefix: '', sourceFiles: 'pipline.yaml')], usePromotionTimestamp: false, useWorkspaceInPromotion: false, verbose: false)])
            }
        }

        	stage('在k8s-master上执行部署命令') {
            steps {

               sh '''ssh   root@192.168.59.128   kubectl apply  -f  /root/deploy/pipline.yaml
               ssh   root@192.168.59.128    kubectl rollout restart deployment pipline-deployment -n dev'''
            }
        }

    }
	post {
	    success {
		dingtalk(
		    robot: 'jenkins-dingding',
			type: 'MARKDOWN',
			title: "success: ${JOB_NAME}",
			text: ["- 成功构建: ${JOB_NAME}！ \n - 版本：latest \n - 持续时间：${currentBuild.durationString}"]
		)
				
		}
		failure {
		dingtalk(
			robot: 'jenkins-dingding',
			type: 'MARKDOWN',
			title: "success: ${JOB_NAME}",
			text: ["- 失败构建: ${JOB_NAME}！ \n - 版本：latest \n - 持续时间：${currentBuild.durationString}"]
		
		)
		
		}
	
	}
	
}
凌霜傲雪归来
关注
  • 14
    点赞
  • 踩
  • 127
    收藏
    觉得还不错? 一键收藏
  • 3
    评论
专栏目录
jenkins k8s环境部署
weixin_46684804的博客
04-02 7509
前端部署 准备工作： 跟前端开发确认好git地址，代码分支，打出的包名。 1.打开jenkins,选择前端分组环境 2.在部署新应用时，需要创建新的jenkins job,我们可以基于已有的前端项目创建新的项目（简单说就是copy） 选中一个前端项目打开 复制名字 新建任务 3.创建新jenkins job成功后，修改git地址以及变量。 修改git地址 节点限制选择slave1 修改变量，修改完成后点击保存。自此新应用job创建完成。 4.登录172.16.
使用jenkins-pipeline进行利用项目文件自动化部署到k8s上
qq_43470725的博客
03-18 1491
若要通过Gitee webhook来触发Jenkins上的构建任务，在Gitee仓库的Webhook配置界面，需要填入上述Jenkins服务器的Webhook URL地址，这样一旦Gitee仓库有新的提交，就会向该地址发送消息从而触发对应的构建流程。**Quiet period：**是指在源代码仓库发生变更后，流水线在触发新的构建之前等待的一段时间。**Advanced Project Options：**是指一系列更深层次的配置项，用于对项目的构建、执行和管理进行更加细致、定制化的设置。
k8s+jenkins实现自动化部署应用至k8s集群
热门推荐
一个天蝎座的程序猿
05-22 1万+
1.jenkins环境准备并启动jenkins服务 1）jdk环境配置 [root@centos7 ~]# ll /app/ [root@centos7 ~]# cat /etc/profile | tail -n3 #jdk的环境变量 export JAVA_HOME=/app/jdk export PATH=JAVAHOME/bin:JAVA_HOME/bin:JAVAH​OME/bin:JAVA_HOME/jre/bin:PATHexportCLASSPATH=PATH export CLASS
K8s部署高可用Jenkins
最新发布
Gao__xi的博客
06-23 1029
K8s1.28.2集群一台可以连接外网的云主机：用于下载一些Docker镜像Jenkins-Slave部署完成后，发现Pod中默认启动的容器jnlp，只能满足我们拉取代码的任务，我们要通过Maven构建项目，并且我们项目是JDK8的，需要一个JDK8的环境，因此，我们可以构建一个自己的用于代码打包的镜像，然后添加到Jenkins-Slave的Pod中sleep 1;done"]解释下Dockerfilemaven的tar包中，我已经将settings.xml的中央仓库镜像换成了阿里云。
【实战】采用jenkins pipeline实现自动构建并部署至k8s
勤于笔记，成于点滴。
05-08 1634
在前面的kubernetes系列博文中我们分享了从创建kubernetes集群到各种中间件的安装，以及从springboot项目的容器化部署到kubernetes外网映射，基本上包含了从0到1的K8S基础实战的整个过程。今天我们再分享一期采用jenkins pipeline实现自动构建并部署至k8s的实战演示，各位大大敬请鉴赏。本文中采用jenkins pipeline执行整个jenkins的构建过程，在pipeline中使用docker执行maven构建。构建后通过dockerfile将jar包构建为
jenkins部署k8s项目-CICD
渐行渐远的博客
04-26 301
一环境准备 1 docker仓库，harbor我这里用的是线上的hub https://hub.docker.com/ 自己注册即可 2 准备git仓库，我这里用的是码云 https://gitee.com/huningfei/java.git 3 准备好k8s环境，一主两从，可以二进制安装，也可以kubeadmin安装 master:172.16.78.103 node1:172.16.78....
基于jenkins+k8s(container)实现CI/CD
qq_33816243的博客
05-15 691
本文以企业生产环境CICD流程为背景，利用 Jenkins、SonarQube、Harbor、Container、Kubernetes技术，搭建一个完整的 CI/CD 管道，模拟实际生产环境项目开发部署流程，实现持续集成、持续交付和持续部署。
k8s中Jenkins流水线配置自动化部署java+vue等服务.rar
06-10
通过Jenkins流水线发布Java服务到k8s集群上，主要是通过在Jenkins slave上集成宿主机docker，helm，kubectl工具来打包镜像部署服务到k8s集群上。
10.k8s部署微服务网站企业级实战案例-仅文档
06-07
自建k8s集群，并且在自建k8s集群中，部署生产微服务的企业实际应用的项目案例，全程包括快速自建k8s集群，docker安装，jenkins安装，编写jenkinsfile文件和k8s的yaml文件，在jenkins中创建流水线项目，部署项目各个...
Jenkins+gitlab+k8s代码自动集成和发布到k8s集群手册
02-17
利用jenkins，gitlab，构建自动化的代码发布流水线，并自动部署到k8s集群中
k8s部署jenkins服务.pdf
12-23
要在k8s平台上部署jenkins服务，需要使用k8s的deployment资源来部署jenkins服务，并配置jenkins服务的环境变量和端口信息。 第六个知识点：jenkins服务的环境变量配置 要配置jenkins服务的环境变量，需要在jenkins...
rancher2.2 shell jenkins k8s 自动化部署
02-19
包含NodePort，HostPort，ClusterIp几种方式自动化部署脚本。
[k8s]jenkins部署在k8s集群
weixin_34194702的博客
12-25 382
$ cat jenkins-pvc.yaml kind: PersistentVolumeClaim apiVersion: v1 metadata: name: jenkins-pvc spec: storageClassName: "managed-nfs-storage" accessModes: - ReadWriteMany resources: re...
通过Jenkins将应用发布到K8s1.24.3
drrui520的博客
12-13 791
一、准备基础环境EOF配置主机名安装常用软件二、部署K8S群集基础配置[三台centos]1、关闭交换分区swap.2、加载模块并添加v4流量传递EOFsysctl -p3、安装ipvs/bin/bashEOF4、安装containerdoverlayEOFSystemdCgroup = false 改为 SystemdCgroup = true。
k8s的jenkins部署java项目到k8s集群cicd持续集成
qq_34953582的博客
08-08 1704
k8s中的jenkins部署java项目到k8s集群cicd持续集成
Jenkins发布项目到K8S集群
wangshui898的专栏
01-07 3619
CI/CD常用服务部署 Jenkins && Github docker-compose文件 version: "3" services: jenkins: container_name: jenkins image: jenkins:latest restart: always user: root ports: - 8080:8080 - 50000:50000 volumes: - /data/j
使用jenkins发布服务至k8s
西瓜
12-23 360
流水线——》配置 pipeline { agent any environment { PROJECT_NAME_CN = '后端服务' PROJECT_NAME = 'rules-server' PACKAGE_TYPE = 'jar' PROJECT_VERSION = 'v1.0.0' PROJECT_BRANCH = '...
jenkins发布k8s平台
菜的一笔
12-05 336
pipeline流水线
jenkinsfile 流水线 部署到k8s 探查是否部署成功
05-14
可以通过 Kubernetes 插件来在 Jenkinsfile 中编写 Kubernetes 部署流水线。在流水线中，可以使用 kubectl 命令行工具将应用程序部署到 Kubernetes 集群中。部署完成后，可以使用 kubectl 命令行工具检查应用程序是否已经成功部署到 Kubernetes 集群中。 以下是一个简单的示例，可以在 Jenkinsfile 中编写 Kubernetes 部署流水线： ``` pipeline { agent any stages { stage('Build') { steps { // 构建应用程序 } } stage('Deploy to Kubernetes') { steps { // 使用 kubectl 部署应用程序到 Kubernetes 集群中 sh "kubectl apply -f deployment.yaml" // 检查应用程序是否已经部署成功 sh "kubectl get pods" } } } } ``` 在上面的示例中，我们使用 sh 命令运行 kubectl 命令行工具来部署应用程序。使用 kubectl get pods 命令可以检查应用程序是否已经成功部署到 Kubernetes 集群中。可以通过适当的错误处理和日志记录来处理部署失败的情况。
评论 3
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值