SpringCloud--20CICD和DevOps

1.CICD

1)Continuous integration(CI)

持续集成是一种软件开发实践,即团队开发成员经常集成他们的工作,通常每个成员至少集成一次,也就意味着每天可能会发生多次集成。每次集成都通过自动化的构建(包括编译,发布,自动化测试)来验证,从而尽快地发现集成错误。许多团队发现这个过程可以大大减少集成的问题,让团队能够更快的开发内聚的软件。

  
  CD:持续部署


DevOps:更好的去优化,开发,测试流程,使其高度一体化

2.体验CICD

 各公司的cicd落地技术不一样,我们这里使用git+jenkins+k8s

 Jenkins是一个开源软件项目,是基于Java开发的一种持续集成工具,用于监控持续重复的工作,旨在提供一个开放易用的软件平台,使软件的持续集成变成可能,Jenkins只是一个平台,真正运作的都是插件。这就是jenkins流行的原因,因为jenkins什么插件都有 Hudson是Jenkins的前身,是基于Java开发的一种持续集成工具,用于监控程序重复的工作,Hudson后来被收购,成为商业版。后来创始人又写了一个jenkins,jenkins在功能上远远超过hudson。

Jenkins官网:https://jenkins.io/

Jenkins下载:http://updates.jenkins-ci.org/

 jenkins的全部镜像:http://mirrors.jenkins-ci.org/status.html

持续集成的流程:

 先把GitLab装起来

 安装教程参考这里:https://github.com/liuyi01/imooc-docs/blob/master/gitlab-install.md

 一、下载镜像

docker pull registry.cn-hangzhou.aliyuncs.com/imooc/gitlab-ce:latest

二、运行GitLab容器

       使用docker命令运行容器,注意修改hostname为自己喜欢的名字,-v部分挂载目录要修改为自己的目录。
端口映射这里使用的都是安全端口,如果大家的环境没有端口限制或冲突可以使用与容器同端口,如:-p 443:443 -p 80:80 -p 22:22

   1. 生成启动文件 - start.sh

#!/bin/bash
HOST_NAME=gitlab.haojing.com
GITLAB_DIR=/root
docker stop gitlab
docker rm gitlab
docker run -d \
    --privileged=true \
    --hostname ${HOST_NAME} \
    -p 8443:443 -p 8080:80 -p 2222:22 \
    --name gitlab \
    -v ${GITLAB_DIR}/config:/etc/gitlab \
    -v ${GITLAB_DIR}/logs:/var/log/gitlab \
    -v ${GITLAB_DIR}/data:/var/opt/gitlab \
    registry.cn-hangzhou.aliyuncs.com/imooc/gitlab-ce:latest

  修改配置:配置gitlab的域名,端口等等

  

  ok,然后启动

sh start.sh

 

3. 配置环境

  • 修改host文件,使域名可以正常解析

127.0.0.1 gitlab.haojing.com

  • 修改ssh端口(如果主机端口使用的不是22端口)

修改文件:${GITLAB_DIR}/config/gitlab.rb 找到这一行:# gitlab_rails['gitlab_shell_ssh_port'] = 22 把22修改为你的宿主机端口(这里是2222)。然后将注释去掉。

  • 重新启动容器
$ sh start.sh

 

 三、GitLab试用

1. 打开首页

地址:http://gitlab.haojing.com:8080/

ok,如果返回502就多等一会儿,容器还没起来。

ok输入一个密码后再注册一个普通的用户,用户名为邮箱,用户密码为手机号

4. 创建项目

注册成功后会跳到首页,我们创建一个项目,名字大家随意

5. 添加ssh key

项目建好了,我们加一个ssh key,以后本地pull/push就简单啦

创建key,

#如果上一步没有这个文件 我们就创建一个,运行下面命令(邮箱改成自己的哦),一路回车就好了
ssh-keygen -t rsa -C "xxxxx@qq.com"

查看; cd ~/.ssh

然后添加:

然后创建项目

将代码推上去就可以了

 

 

3.安装jenkins

 

在这里我安装到了安装了kubectl命令的那台机器上面,目的方便k8s调用,还需要git,mvn,java的环境。

下载jenkins

http://mirrors.jenkins.io/war-stable/latest/jenkins.war

  运行jar:

运行命令 这里不能用8080,改成8888
 java -jar jenkins.war --httpPort=8888.

 运行过程中会把密码打印出来:

 

51707d2a10184b508dda0bf4a1c5a316

 访问:http://192.168.237.137:8888,然后输入密码

选择选择插件来安装

把这个的插件都选上,然后就可以点击安装了

 

安装好后创建用户,插件安装失败处理方法:https://blog.csdn.net/KingBoyWorld/article/details/77923615

然后创建一个新任务,选择流水线,构建

显示蓝色 则jenkins环境ok.

环境好了以后下面串起整个CICD

这个时候我们选择一个持续集成的服务,就选择 user-service吧,然后在Jenkins里面创建一个任务,然后选择一个流水线

然后选择构建触发器,触发远程构建,token随便写一个简单的123456,主要是拿到这个url放到gitlab的持续集成里面去

拿到它的url,放到gitlab的持续集成里面

然后就添加webhook

添加成功

接下来配置jenkins,去掉勾

 

ok,然后回到gitlab,测试webhook

返回这个表示成功

jenkins也显示蓝色成功

这个时候从gitlab通过webhook调用jenkins就是成功了的。然后接下来的一步就是要通过jenkins去调maven的构建,需要编写groov脚本,写一步测一步

 

然后配置host 解析 配置 git的ssh,测试脚本点击立即构建

下一个阶段就是执行maven命令,继续写脚本,编译user-service模块和其依赖的模块

#!groovy
pipeline {
    agent any
    environment{
     repository="ssh://git@gitlab.haojing.com:2222/Andy/haojing.git"
     module="user-service"
    }
    stages {
        stage('获取代码') {
            steps {
                echo "start fetch code from git:${repository}"
                deleteDir()
                git "${repository}"
            }
        }
         stage('编译+单元测试') {
            steps {
                echo "start compile"
                sh "mvn -U -pl ${module} -am clean package"
            }
        }
    }
}

   

  构建成功。
  然后是代码静态检查,这里就直接跳过了,不做了,下一个阶段就是构建镜像了

  构建脚本

 

#!groovy
pipeline {
    agent any
    environment{
     repository="ssh://git@gitlab.haojing.com:2222/Andy/haojing.git"
     module="user-service"
     secript_path="/home/scripts"
    }
    stages {
        stage('获取代码') {
            steps {
                echo "start fetch code from git:${repository}"
                deleteDir()
                git "${repository}"
            }
        }
        stage('代码检查') {
            steps {
                echo "start checkout code"
            }
        }
         stage('编译+单元测试') {
            steps {
                echo "start compile"
                sh "mvn -U -pl ${module} -am clean package"
            }
        }
         stage('构建镜像') {
            steps {
                echo "start build images"
                sh "${secript_path}/build-images.sh ${module}"
            }
        }
    }
}

 脚本种执行的shell文件

#!/bin/bash
MODULE=$1
TIME=$(date "+%Y%m%d%M%H%M")
GIT_REVERSION=$(git log -1 --pretty=format:"%h")

IMAGE_NAME=hub.haojing.com/haojing/${MODULE}:${TIME}_${GIT_REVERSION}
cd ${MODULE}
pwd
echo ${MODULE}
echo ${IMAGE_NAME}
docker build -t ${IMAGE_NAME} .

cd -

docker push ${IMAGE_NAME}

 

 

 然后构建和推送镜像已经完成,接下来就是要更新服务了,即发布系统了,发布系统就是要更新镜像。那么镜像的名字就要在上一个步骤中生成了之后保存起来

 

然后编写发布系统的脚本

#!/bin/bash
IMAGE='cat IMAGE_NAME'
DEPLOYMENT=$1
MODULE=$2
echo IMAGE
kubectl set deployments/${DEPLOYMENT} ${MODULE}=${IMAGE}

编写流水线:

#!groovy
pipeline {
    agent any
    environment{
     repository="ssh://git@gitlab.haojing.com:2222/Andy/haojing.git"
     module="user-service"
     secript_path="/home/scripts"
    }
    stages {
        stage('获取代码') {
            steps {
                echo "start fetch code from git:${repository}"
                deleteDir()
                git "${repository}"
            }
        }
        stage('代码检查') {
            steps {
                echo "start checkout code"
            }
        }
         stage('编译+单元测试') {
            steps {
                echo "start compile"
                sh "mvn -U -pl ${module} -am clean package"
            }
        }
         stage('构建镜像') {
            steps {
                echo "start build images"
                sh "${secript_path}/build-images.sh ${module}"
            }
        }
         stage('发布系统') {
            steps {
                echo "start deploy"
                sh "${secript_path}/deploy.sh user-service-deployment ${module}"
            }
        }
    }
}

 然后查看是否更新成功:

kubectl get deploy

kubectl get pods

 

 

 

 

 

 

 

  • 1
    点赞
  • 4
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
微服务是什么?微服务是用于构建应用程序的架构风格,一个大的系统可由一个或者多个微服务组成,微服务架构可将应用拆分成多个核心功能,每个功能都被称为一项服务,可以单独构建和部署,这意味着各项服务在工作和出现故障的时候不会相互影响。为什么要用微服务?单体架构下的所有代码模块都耦合在一起,代码量大,维护困难,想要更新一个模块的代码,也可能会影响其他模块,不能很好的定制化代码。微服务中可以有java编写、有Python编写的,他们都是靠restful架构风格统一成一个系统的,所以微服务本身与具体技术无关、扩展性强。大型电商平台微服务功能图为什么要将SpringCloud项目部署到k8s平台?SpringCloud只能用在SpringBoot的java环境中,而kubernetes可以适用于任何开发语言,只要能被放进docker的应用,都可以在kubernetes上运行,而且更轻量,更简单。SpringCloud很多功能都跟kubernetes重合,比如服务发现,负载均衡,配置管理,所以如果把SpringCloud部署到k8s,那么很多功能可以直接使用k8s原生的,减少复杂度。Kubernetes作为成熟的容器编排工具,在国内外很多公司、世界500强等企业已经落地使用,很多中小型公司也开始把业务迁移到kubernetes中。kubernetes已经成为互联网行业急需的人才,很多企业都开始引进kubernetes技术人员,实现其内部的自动化容器云平台的建设。对于开发、测试、运维、架构师等技术人员来说k8s已经成为的一项重要的技能,下面列举了国内外在生产环境使用kubernetes的公司: 国内在用k8s的公司:阿里巴巴、百度、腾讯、京东、360、新浪、头条、知乎、华为、小米、富士康、移动、银行、电网、阿里云、青云、时速云、腾讯、优酷、抖音、快手、美团等国外在用k8s的公司:谷歌、IBM、丰田、iphone、微软、redhat等整个K8S体系涉及到的技术众多,包括存储、网络、安全、监控、日志、DevOps、微服务等,很多刚接触K8S的初学者,都会感到无从下手,为了能让大家系统地学习,克服这些技术难点,推出了这套K8S架构师课程。Kubernetes的发展前景 kubernetes作为炙手可热的技术,已经成为云计算领域获取高薪要掌握的重要技能,在招聘网站搜索k8s,薪资水平也非常可观,为了让大家能够了解k8s目前的薪资分布情况,下面列举一些K8S的招聘截图: 讲师介绍:  先超容器云架构师、IT技术架构师、DevOps工程师,曾就职于世界500强上市公司,拥有多年一线运维经验,主导过上亿流量的pv项目的架构设计和运维工作;具有丰富的在线教育经验,对课程一直在改进和提高、不断的更新和完善、开发更多的企业实战项目。所教学员遍布京东、阿里、百度、电网等大型企业和上市公司。课程学习计划 学习方式:视频录播+视频回放+全套源码笔记 教学服务:模拟面试、就业指导、岗位内推、一对一答疑、远程指导 VIP终身服务:一次购买,终身学习课程亮点:1. 学习方式灵活,不占用工作时间:可在电脑、手机观看,随时可以学习,不占用上班时间2.老师答疑及时:老师24小时在线答疑3. 知识点覆盖全、课程质量高4. 精益求精、不断改进根据学员要求、随时更新课程内容5. 适合范围广,不管你是0基础,还是拥有工作经验均可学习:0基础1-3年工作经验3-5年工作经验5年以上工作经验运维、开发、测试、产品、前端、架构师其他行业转行做技术人员均可学习课程部分项目截图   课程大纲 k8s+SpringCloud全栈技术:基于世界500强的企业实战课程-大纲第一章 开班仪式老师自我介绍、课程大纲介绍、行业背景、发展趋势、市场行情、课程优势、薪资水平、给大家的职业规划、课程学习计划、岗位内推第二章 kubernetes介绍Kubernetes简介kubernetes起源和发展kubernetes优点kubernetes功能kubernetes应用领域:在大数据、5G、区块链、DevOps、AI等领域的应用第三章  kubernetes中的资源对象最小调度单元Pod标签Label和标签选择器控制器Replicaset、Deployment、Statefulset、Daemonset等四层负载均衡器Service第四章 kubernetes架构和组件熟悉谷歌的Borg架构kubernetes单master节点架构kubernetes多master节点高可用架构kubernetes多层架构设计原理kubernetes API介绍master(控制)节点组件:apiserver、scheduler、controller-manager、etcdnode(工作)节点组件:kube-proxy、coredns、calico附加组件:prometheus、dashboard、metrics-server、efk、HPA、VPA、Descheduler、Flannel、cAdvisor、Ingress     Controller。第五章 部署多master节点的K8S高可用集群(kubeadm)第六章 带你体验kubernetes可视化界面dashboard在kubernetes中部署dashboard通过token令牌登陆dashboard通过kubeconfig登陆dashboard限制dashboard的用户权限在dashboard界面部署Web服务在dashboard界面部署redis服务第七章 资源清单YAML文件编写技巧编写YAML文件常用字段,YAML文件编写技巧,kubectl explain查看帮助命令,手把手教你创建一个Pod的YAML文件第八章 通过资源清单YAML文件部署tomcat站点编写tomcat的资源清单YAML文件、创建service发布应用、通过HTTP、HTTPS访问tomcat第九章  kubernetes Ingress发布服务Ingress和Ingress Controller概述Ingress和Servcie关系安装Nginx Ingress Controller安装Traefik Ingress Controller使用Ingress发布k8s服务Ingress代理HTTP/HTTPS服务Ingress实现应用的灰度发布-可按百分比、按流量分发第十章 私有镜像仓库Harbor安装和配置Harbor简介安装HarborHarbor UI界面使用上传镜像到Harbor仓库从Harbor仓库下载镜像第十一章 微服务概述什么是微服务?为什么要用微服务?微服务的特性什么样的项目适合微服务?使用微服务需要考虑的问题常见的微服务框架常见的微服务框架对比分析第十二章 SpringCloud概述SpringCloud是什么?SpringCloudSpringBoot什么关系?SpringCloud微服务框架的优缺点SpringCloud项目部署到k8s的流程第十三章 SpringCloud组件介绍服务注册与发现组件Eureka客户端负载均衡组件Ribbon服务网关Zuul熔断器HystrixAPI网关SpringCloud Gateway配置中心SpringCloud Config第十四章 将SpringCloud项目部署到k8s平台的注意事项如何进行服务发现?如何进行配置管理?如何进行负载均衡?如何对外发布服务?k8s部署SpringCloud项目的整体流程第十五章 部署MySQL数据库MySQL简介MySQL特点安装部署MySQL在MySQL数据库导入数据对MySQL数据库授权第十六章 将SpringCLoud项目部署到k8s平台SpringCloud的微服务电商框架安装openjdk和maven修改源代码、更改数据库连接地址通过Maven编译、构建、打包源代码在k8s中部署Eureka组件在k8s中部署Gateway组件在k8s中部署前端服务在k8s中部署订单服务在k8s中部署产品服务在k8s中部署库存服务第十七章 微服务的扩容和缩容第十八章 微服务的全链路监控什么是全链路监控?为什么要进行全链路监控?全链路监控能解决哪些问题?常见的全链路监控工具:zipkin、skywalking、pinpoint全链路监控工具对比分析第十九章 部署pinpoint服务部署pinpoint部署pinpoint agent在k8s中重新部署带pinpoint agent的产品服务在k8s中重新部署带pinpoint agent的订单服务在k8s中重新部署带pinpoint agent的库存服务在k8s中重新部署带pinpoint agent的前端服务在k8s中重新部署带pinpoint agent的网关和eureka服务Pinpoint UI界面使用第二十章 基于Jenkins+k8s+harbor等构建企业级DevOps平台第二十一章 基于Promethues+Alert+Grafana搭建企业级监控系统第二十二章 部署智能化日志收集系统EFK 

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

时空恋旅人

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值