在容器上构建持续部署及最佳实践初探

要想理解持续集成和持续部署，先要了解它的部分组成，以及各个组成部分之间的关系。下面这张图是我见过的最简洁、清晰的持续部署和集成的关系图。

图片来源

持续部署：

如图所示，开发的流程是这样的：
程序员从源码库（Source Control）中下载源代码，编写程序，完成后提交代码到源码库，持续集成（Continuous Integration）工具从源码库中下载源代码，编译源代码，然后提交到运行库（Repository），然后持续交付（Continuous Delivery）工具从运行库（Repository）中下载代码，生成发布版本，并发布到不同的运行环境（例如DEV，QA，UAT， PROD）。

图中，左边的部分是持续集成，它主要跟开发和程序员有关；右边的部分是持续部署，它主要跟测试和运维有关。持续交付（Continuous Delivery）又叫持续部署（Continuous Deployment），它们如果细分的话还是有一点区别的，但我们这里不分得那么细，统称为持续部署。本文侧重讲解持续部署。

持续集成和部署有下面几个主要参与者：
源代码库：负责存储源代码，常用的有Git和SVN。
持续集成与部署工具：负责自动编译和打包以及把可运行程序存储到可运行库。比较流行的有Jenkins，GitLab，Travis CI，CircleCI 等
库管理器(Repository Manager)：也就是图中的Repository，我们又叫运行库，负责管理程序组件。最常用的是Nexus。它是一个私有库，它的作用是管理程序组件。

库管理器有两个职能：
**管理第三方库：**应用程序常常要用到很多第三方库，并且不同的技术栈需要的库不同，它们经常是存放在第三方公共库里，管理起来不是很方便。一般公司会建立一个私有管理库，来集中统一管理各种第三方软件，例如它既可以做为Maven库（Java），也可以做为镜像库（Docker），还可以做为NPM库（JavaScript），来保证公司软件的规范性。
**管理内部程序的交付：**所有公司在各种环境（例如DEV，QA，UAT， PROD）发布的程序都由它来管理，并赋予统一的版本号，这样任何交付都有据可查，同时便利于程序回滚。

持续部署步骤：

各个公司对持续部署（Continuous Deployment）的要求不同，它的步骤也不相同，但主要包括下面几个步骤：

下载源码：从源代码库（例如github）中下载源代码。
编译代码：编译语言都需要有这一步
**测试：**对程序进行测试。
生成镜像：这里包含两个步骤，一个是创建镜像，另一个是存储镜像到镜像库。
部署镜像： 把生成的镜像部署到容器上

上面的流程是广义的持续部署流程，狭义的流程是从库管理器中检索可运行程序，这样就省去了下载源码和编译代码环节，改由直接从库管理器中下载可执行程序。但由于并不是每个公司都有单独的库管理器，这里就采用了广义的持续部署流程，这样对每个公司都适用。

持续部署实例：

下面我们通过一个具体的实例来展示如何完成持续部署。我们用Jenkins来做为持续部署工具，用它部署一个Go程序到k8s环境。

我们的流程基本是上面讲的狭义流程，但由于没有Nexus，我们稍微变通了一下，改由从源码库直接下载源程序，步骤如下：

下载源码：从github下载源代码到Jenkins的运行环境
测试：这一步暂时没有实际内容
生成镜像：创建镜像，并上传到Docker hub。
部署镜像： 将生成的镜像部署到k8s

在创建Jenkins项目之前，先要做些准备工作：

建立Docker Hub账户

需要在Docker Hub上创建账户和镜像库，这样才能上传镜像。具体过程这里就不详细讲解了，请查阅相关资料。

在Jenkins上创建凭证（Credentials）

需要设置访问Docker hub的用户和口令，以后在Jenkins脚本里可以通过变量的方式进行引用，这样口令就不会以明码的方式出现在程序里。

用管理员账户登录 Jenkins主页面后，找到 Manage Jenkins-》Credentials-》System -》Global Credentials -》Add Credentials，如下图所示输入你的Docker Hub的用户名和口令。“ID”是后面你要在脚本里引用的。

创建预装Docker和k8s的Jenkins镜像

Jenkins的默认容器里面没有Docker和k8s，因此我们需要在Jenkins镜像的基础上重新创建新的镜像，后面还会详细讲解。
下面是镜像文件（Dockerfile-modified-jenkins）

FROM jenkins/jenkins:lts

USER root

ENV DOCKERVERSION=19.03.4

RUN curl -fsSLO https://download.docker.com/linux/static/stable/x86_64/docker-${DOCKERVERSION}.tgz \
  && tar xzvf docker-${DOCKERVERSION}.tgz --strip 1 \
                 -C /usr/local/bin docker/docker \
  && rm docker-${DOCKERVERSION}.tgz

RUN curl -LO https://storage.googleapis.com/kubernetes-release/release/$(curl -s https://storage.googleapis.com/kubernetes-release/release/stable.txt)/bin/linux/amd64/kubectl \
    && chmod  x ./kubectl \
    && mv ./kubectl /usr/local/bin/kubectl

上面的镜像在“jenkins/jenkins:lts”的基础上又安装了Docker和kubectl，这样就支持这两个软件了。镜像里使用的是docker的19.03.4版本。这里装的只是“Docker CLI”，没有Docker引擎。用的时候还是要把虚拟机的卷挂载到容器上，使用虚机的Docker引擎。因此最好保证容器里的Docker版本和虚机的Docker版本一致。

使用如下命令查看Docker版本：

vagrant@ubuntu-xenial:/$ docker version

详细情况请参见Configure a CI/CD pipeline with Jenkins on Kubernetes

准备工作已经完成，现在要正式创建Jenkins项目：

Jenkins脚本：

项目的创建是在Jenkins的主页上来完成，它的名字是“jenkins-k8sdemo”，它的最主要部分是脚本代码，它也跟Go程序存放在相同的源码库中，文件的名字也是“jenkins-k8sdemo”。项目的脚本页面如下图所示。

如果你不熟悉安装和创建Jenkins项目，请参阅在k8s上安装Jenkins及常见问题

下面就是jenkins-k8sdemo脚本文件：

def POD_LABEL = "k8sdemopod-${UUID.randomUUID().toString()}"
podTemplate(label: POD_LABEL, cloud: 'kubernetes', containers: [
    containerTemplate(name: 'modified-jenkins', image: 'jfeng45/modified-jenkins:1.0', ttyEnabled: true, command: 'cat')
  ],
  volumes: [
     hostPathVolume(mountPath: '/var/run/docker.sock', hostPath: '/var/run/docker.sock')
  ]) {
   

    node(POD_LABEL) {
   
       def kubBackendDirectory = "/script/kubernetes/backend"
       stage('Checkout') {
   
            container('modified-jenkins') {
   
                sh 'echo get source from github'
                git 'https://github.com/jfeng45/k8sdemo'
            }
          }
       stage('Build image') {
   
            def imageName = "jfeng45/jenkins-k8sdemo:${env.BUILD_NUMBER}"
            def dockerDirectory = "${kubBackendDirectory}/docker/Dockerfile-k8sdemo-backend"
             container('modified-jenkins') {
   
               withCredentials([[$class: 'UsernamePasswordMultiBinding',
                 credentialsId: 'dockerhub',
                 usernameVariable: 'DOCKER_HUB_USER',
                 passwordVariable: 'DOCKER_HUB_PASSWORD']]) {
   
                 sh """
                   docker login -u ${DOCKER_HUB_USER} -p ${DOCKER_HUB_PASSWORD}
                   docker build -f ${WORKSPACE}${dockerDirectory} -t ${imageName} .
                   docker push ${imageName}
                   """
               }
             }
           }
       stage('Deploy') {
   
           container('modified-je