基于Docker的微服务CI CD流水线

最新推荐文章于 2024-09-01 17:55:30 发布
最新推荐文章于 2024-09-01 17:55:30 发布
阅读量241 收藏
点赞数
文章标签： 运维 java git
原文链接：https://my.oschina.net/orrin/blog/1828755
版权

为什么80%的码农都做不了架构师？>>>   hot3.png

基于Docker的CI/CD流水线

环境准备

ip操作系统
192.168.2.110centos 7.2

JDK安装


mkdir -p /opt/java
cd /opt/java

wget http://download.oracle.com/otn-pub/java/jdk/8u172-b11/a58eab1ec242421181065cdc37240b08/jdk-8u172-linux-x64.tar.gz

tar -zxvf jdk-8u172-linux-x64.tar.gz

配置环境变量

vim /etc/profile

加入
# Java Environment Path
export JAVA_HOME=/opt/jdk1.8.0_144
export PATH=$JAVA_HOME/bin:$PATH
export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar

Maven安装


mkdir -p /opt/maven
cd /opt/maven

wget http://117.143.109.148/cache/mirrors.shu.edu.cn/apache/maven/maven-3/3.5.3/binaries/apache-maven-3.5.3-bin.tar.gz

tar -zxvf apache-maven-3.5.3-bin.tar.gz

配置环境变量

vim /etc/profile

加入
MAVEN_HOME=/opt/apache/apache-maven-3.5.3
export MAVEN_HOME
export PATH=${PATH}:${MAVEN_HOME}/bin

执行

source /etc/profile

项目版本控制工具gitlab、git

1.git安装

yum –y install git

2.gitlab安装

采用docker部署gitlab

mkdir -p /opt/docker/gitlab/config
mkdir -p /opt/docker/gitlab/logs
mkdir -p /opt/docker/gitlab/data

docker pull gitlab/gitlab-ce:latest

sudo docker run --detach \
    --hostname dev.devstack.com \
    --privileged=true \
    -e 'GITLAB_PORT=3380' \
    -e 'GITLAB_SSH_PORT=3322' \
    --publish 3443:443 \
    --publish 3380:80  \
    --publish 3322:22 \
    --name gitlab \
    --volume /opt/docker/gitlab/config:/etc/gitlab \
    --volume /opt/docker/gitlab/logs:/var/log/gitlab \
    --volume /opt/docker/gitlab/data:/var/opt/gitlab \
    gitlab/gitlab-ce:latest

下载镜像时间会长点，看网络情况，也可以科学上网，会好点

启动成功后，第一次登录使用的用户名和密码为 root 和 5iveL!fe，开始更改密码和配置ssh key

Jenkins安装

mkdir -p /opt/jenkins
cd /opt/jenkins

wget https://mirrors.tuna.tsinghua.edu.cn/jenkins/war-stable/2.121.1/jenkins.war

nohup java -jar jenkins.war >/opt/jenkins/jenkins.log 2>&1 &
命令行参数参数说明
--httpPort=$HTTP_PORT使用标准http协议在端口$ HTTP_PORT上运行Jenkins侦听器。默认值为端口8080.要禁用（因为您使用的是https），请使用端口-1
--httpListenAddress=$HTTP_HOST将Jenkins绑定到由$ HTTP_HOST表示的IP地址。默认值为0.0.0.0 - 即侦听所有可用的接口。例如，要仅侦听来自localhost的请求，可以使用–httpListenAddress = 127.0.0.1
--httpsPort=$HTTP_PORT在端口$ HTTP_PORT上使用HTTPS协议
--httpsListenAddress=$HTTPS_HOST绑定Jenkins在$ HTTPS_HOST表示的IP地址上侦听HTTPS请求。
--prefix=$PREFIX运行Jenkins以在URL的末尾包含$ PREFIX。例如，要使Jenkins可以在http // myServer 8080 / jenkins上访问，请设置–prefix = / jenkins
--ajp13Port=$AJP_PORT使用标准AJP13协议在端口$ AJP_PORT上运行Jenkins侦听器。默认值为端口8009.要禁用（因为您使用的是https），请使用端口-1。
--ajp13ListenAddress=$AJP_HOST将Jenkins绑定到由$ AJP_HOST表示的IP地址。默认值为0.0.0.0 - 即侦听所有可用的接口。
--argumentsRealm.passwd.$ADMIN_USER设置用户$ ADMIN_USER的密码。如果Jenkins安全性已打开，则必须以$ ADMIN_USER身份登录才能配置Jenkins或Jenkins项目。注意还必须指定此用户具有管理员角色。 （见下面的参数）。
--argumentsRealm.roles.$ADMIN_USER=admin将$ ADMIN_USER设置为管理用户，如果Jenkins的安全性已打开，可以配置Jenkins。有关详细信息，请参阅Jenkins安全。
-Xdebug -Xrunjdwp:transport=dt_socket,address=$DEBUG_PORT,server=y,suspend=n设置调试开关，您可以访问$ DEBUG_PORT上的调试。
logfile=$LOG_PATH/winstone_date +”%Y%m-%d_%H-%M”.log定义日志格式
-XX:PermSize=512M -XX:MaxPermSize=2048M -Xmn128M -Xms1024M -Xmx2048M参考Oracle Jave设置

访问Jenkins只需要在客户端浏览器输入：http://ip:8080/ ，即可

默认初始访问Jenkin需要管理员密码，密码位置：/root/.jenkins/secrets/initialAdminPassword cat /root/.jenkins/secrets/initialAdminPassword

进入选择插件安装界面，选择第一个（Install suggested plugins） avatar

启动脚本

#!/bin/sh

DESC="Jenkins CI Server"
NAME=jenkins
PIDFILE=/var/run/$NAME.pid
RUN_AS=jenkins
COMMAND="java -- -jar /opt/jenkins/jenkins.war"

d_start() {
    start-stop-daemon --start --quiet --background --make-pidfile --pidfile $PIDFILE --chuid $RUN_AS --exec $COMMAND
}

d_stop() {
    start-stop-daemon --stop --quiet --pidfile $PIDFILE
    if [ -e $PIDFILE ]
        then rm $PIDFILE
    fi
}

case $1 in
    start)
    echo -n "Starting $DESC: $NAME"
    d_start
    echo "."
    ;;
    stop)
    echo -n "Stopping $DESC: $NAME"
    d_stop
    echo "."
    ;;
    restart)
    echo -n "Restarting $DESC: $NAME"
    d_stop
    sleep 1
    d_start
    echo "."
    ;;
    *)
    echo "usage: $NAME {start|stop|restart}"
    exit 1
    ;;
esac

exit 0

等待安装好插件后，登录Jenkins，配置jenkins需要的maven、jdk路径，并安装的需要插件 avatar

•发布插件 Deploy to container Plugin 必须

•Maven插件 Maven Integration plugin必须

docker仓库安装

docker私有仓库管理系统harbor的部署使用：https://my.oschina.net/orrin/blog/1820462

nexus安装

mkdir -p /opt/nexus
cd /opt/nexus

wget https://sonatype-download.global.ssl.fastly.net/nexus/oss/nexus-2.14.3-02-bundle.tar.gz

tar xfvz nexus-2.14.3-02-bundle.tar.gz

cd nexus-2.14.3-02-bundle

启动nexus

nexus-2.14.3-02/bin/nexus start

访问页面：http://192.168.2.110:8081/nexus avatar

注意：nexus的默认端口是8081，后面可以修改。 用默认账户和密码登录 账户：admin 密码：admin123

maven设置

docker-harbor密码设置

1、控制台执行：

mvn --encrypt-master-password <password harbor密码>

2、在{user.home}/.m2/目录创建settings-security.xml文件，将主密码（第一步生成的密码）写入：

<?xml version="1.0" encoding="UTF-8"?>
<settingsSecurity>
  <master>{K/cB3R+gXBgH3LMUGFhs4FV9PKIgqKPsBNNrMM1w/dc=}</master>
</settingsSecurity>

3、控制台执行：

mvn --encrypt-password <password harbor密码>

将生成的密码写入到settings.xml的<services>中

	<server>
	  <id>docker-harbor</id>
	  <username>admin</username>
	  <password>{RPYxhVXHfpkHXH30T4Y82RSycGbN9SQo0NB3F7FvGIQ=}</password>
	  <configuration>
		<email>zhangorrin@126.cn</email>
	  </configuration>
	</server>
nexus密码设置

将密码写入到settings.xml的<services>中

  <server> 
    <id>releases</id> 
    <username>admin</username> 
    <password>admin123</password> 
  </server> 
  <server> 
    <id>snapshots</id> 
    <username>admin</username> 
    <password>admin123</password> 
  </server>

项目集成

1.修改pom.xml文件

<!-- 添加属性 -->
<properties>
    <!-- docker仓库地址 -->
    <docker.repostory>192.168.2.150</docker.repostory>
    <!-- 项目名称 namespace -->
    <docker.registry.name>abcd</docker.registry.name>

    <!-- maven私服地址 -->
    <repository.url>http://192.168.2.110:8081/nexus/content</repository.url>
</properties>

<!-- 添加profiles -->
<profiles>
    <profile>
        <id>dev</id>
        <activation>
            <activeByDefault>true</activeByDefault>
        </activation>
        <properties>
            <spring.profiles.active>dev</spring.profiles.active>
        </properties>
    </profile>

    <profile>
        <id>test</id>
        <properties>
            <spring.profiles.active>test</spring.profiles.active>
        </properties>
    </profile>

    <profile>
        <id>prod</id>
        <properties>
            <spring.profiles.active>prod</spring.profiles.active>
        </properties>
    </profile>

</profiles>


<!-- 添加resources -->
<resources><!-- 使用@@站位符，输出Dockerfile至docker文件夹 -->
    <resource>
        <directory>${project.basedir}/src/main/docker</directory>
        <filtering>true</filtering>
        <includes>
            <include>**/Dockerfile</include>
        </includes>
        <targetPath>../docker</targetPath>
    </resource>
    <resource>
        <directory>${project.basedir}/src/main/resources</directory>
        <filtering>true</filtering>
    </resource>
</resources>


<!-- 添加插件 -->
<plugin>
    <groupId>com.spotify</groupId>
    <artifactId>docker-maven-plugin</artifactId>
    <version>0.4.13</version>
    <executions>
        <execution>
            <phase>deploy</phase>
            <goals>
                <goal>build</goal>
            </goals>
        </execution>
        <execution>
            <id>tag-image</id>
            <phase>deploy</phase>
            <goals>
                <goal>tag</goal>
            </goals>
            <configuration>
                <image>
                    ${docker.repostory}/${docker.registry.name}/${project.artifactId}:${spring.profiles.active}-${project.version}
                </image>
                <newName>
                    ${docker.repostory}/${docker.registry.name}/${project.artifactId}:${spring.profiles.active}-${project.version}
                </newName>
            </configuration>
        </execution>
        <execution>
            <id>push-image</id>
            <phase>deploy</phase>
            <goals>
                <goal>push</goal>
            </goals>
            <configuration>
                <imageName>
                    ${docker.repostory}/${docker.registry.name}/${project.artifactId}:${spring.profiles.active}-${project.version}
                </imageName>
            </configuration>
        </execution>
    </executions>
    <configuration>
        <!-- 私有仓库配置，需要settings.xml文件配合serverId对应的服务地址 -->
        <serverId>docker-harbor</serverId>
        <registryUrl>${docker.repostory}</registryUrl>

        <!--强制docker在每次新的构建上覆盖镜像tags-->
        <!-- <forceTags>true</forceTags> -->

        <!--install阶段也上传，否则只有deploy阶段上传-->
        <!--<pushImage>true</pushImage>-->
        <dockerDirectory>${project.basedir}/target/docker</dockerDirectory>
        <imageName>
            ${docker.repostory}/${docker.registry.name}/${project.artifactId}:${spring.profiles.active}-${project.version}
        </imageName>
        <imageTags>
            <!--docker的tag为项目版本号、latest-->
            <imageTag>${spring.profiles.active}.${project.version}</imageTag>
            <imageTag>${spring.profiles.active}.latest</imageTag>
        </imageTags>
        <resources>
            <rescource><!-- 将打包文件放入dockerDirectory指定的位置 -->
                <targetPath>/</targetPath>
                <directory>${project.build.directory}</directory>
                <include>${project.build.finalName}.jar</include>
            </rescource>
        </resources>
    </configuration>
</plugin>



<repositories>
    <repository>
        <id>public</id>
        <name>local private nexus</name>
        <url>${repository.url}/groups/public</url>
        <releases>
            <enabled>true</enabled>
        </releases>
        <snapshots>
            <enabled>true</enabled>
        </snapshots>
    </repository>
</repositories>

<distributionManagement>
    <repository>
        <id>releases</id>
        <url>${repository.url}/repositories/releases/</url>
    </repository>
    <snapshotRepository>
        <id>snapshots</id>
        <url>${repository.url}/repositories/snapshots/</url>
    </snapshotRepository>
</distributionManagement>

Dockerfile文件：

# Version 0.0.1
FROM java:8

MAINTAINER orrin "zhangorrin@126.cn"

# 环境变量
ENV WORK_PATH /home/project/nmcp
ENV APP_NAME @project.build.finalName@.@project.packaging@
ENV APP_VERSION @project.version@

EXPOSE 10087

#USER
#USER user:group

#VOLUME
VOLUME ["/home/project", "/tmp/data"]

#ADD

#COPY
COPY $APP_NAME $WORK_PATH/

#LABEL
#STOPSIGNAL
#ARG
#ONBUILD

# WORKDIR
WORKDIR $WORK_PATH

RUN echo "Asia/Shanghai" > /etc/timezone

# ENTRYPOINT 
ENTRYPOINT ["java","-Djava.security.egd=file:/dev/./urandom"]

# CMD
CMD ["-jar", "@project.build.finalName@.@project.packaging@"]

2.配置Jenkins

输入项目名称，配置项目git地址及maven命令 avataravataravatar

选择配置后的项目，点击立即构建，构建完成后，即可在harbor上看到生成的镜像。

转载于:https://my.oschina.net/orrin/blog/1828755

weixin_33831673
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
java微服务的炼金术：CI/CD流水线构建
java专栏
07-16 1336
🔥关注墨瑾轩，带你探索编程的奥秘！🚀🔥超萌技术攻略，轻松晋级编程高手🚀🔥技术宝库已备好，就等你来挖掘🚀🔥订阅墨瑾轩，智趣学习不孤单🚀🔥即刻启航，编程之旅更有趣🚀哇，看来你对微服务的炼金术—CI/CD流水线的构建非常感兴趣呢！这篇文章，我会用最俏皮可爱的语言，带你一探究竟，让你从零开始，一步步构建起自己的CI/CD流水线。别担心，我会把每一步都讲得清清楚楚，代码和注释一个都不会少，保证你看完就能动手实践！
在GitLab CI/CD 流水线中获取远程私有仓库的代码
知无涯
08-17 3715
本篇文章我将向大家演示如何在极狐GitLab 流水线中获取另一个私有仓库的代码。 在流水线中获取另一个私有仓库的代码，进行构建，编译，这在跨项目和微服务架构的项目中经常使用到。特别是项目之间存在依赖关系时，该方法让你的流水线变得更加优雅。
使用微服务架构后，如何用jenkins搭建流水线（一）
李谦的博客
07-05 1024
0 引言 自从使用微服务架构之后，子系统已经达到了七八个，按前后端区分，需要构建发布的项目达到了近20个。虽然大家各司其职的进行部署和发版，但是已经浪费了大家很多时间，于是抽空把jenkins搭了一套，帮大家节省时间。 1 安装部署 首先是准备机器，机器要求如下： 机器要求： 　　256MB内存，建议大于512MB 　　10GB的硬盘空间（用于存放Jenkins镜像） 需要安装以下软件： 　　Java 8 (JRE或者JDK都可以) 　 （centos：yum install -y java） 在确保ja
Node.js微服务+流水线服务框架的设想
cteng的专栏
02-02 3338
Node.js微服务+流水线服务框架的设想 要点： 每个微服务从代码实现来看，就是一个JS函数，输入是一个JSON对象，输出也是一个JSON对象 框架负责将其转换为基于URL输入和输出的Web服务； 统计每个微服务的每秒请求数、每秒IO量，以单独的options url公开，以便全局的性能统计模块进行后端服务集群的性能统计微服务支持动态的注册和重启： 动态注册
基于GitOps的容器化微服务部署流水线设计分享
丰耳的博客
04-12 495
CI工具Jenkins，CD工具ArgoCD
centos7+Jenkins + Pipeline+docker 构建流水线自动化部署微服务
♾️
12-07 3555
centos7安装docker服务 安装必要的依赖包 yum install -y yum-utils device-mapper-persistent-data lvm2 yum-utils 提供yum-config-manager实用程序 devicemapper 存储驱动程序需要 device-mapper-persistent-data和lvm2。 设置 Docke...
[Gitops--10]微服务项目部署流水线编写
Q先生
05-05 865
这里可能会出现maven镜像登录harbor失败.在ks-node节点的/etc/systemd/system/docker.service中添加以下配置。部署步骤参见 https://blog.csdn.net/qq_29974229/article/details/129829094 第二章。进入Jenkins,[系统管理] [Manage Credentials] [Jenkins] [全局凭证] [添加凭证][系统管理] [系统配置] [SonarQube Server]
构建Docker化的未来：CI/CD流水线的精粹实践
08-28
5. **微服务架构**：Docker非常适合微服务架构，每个服务可以独立打包、部署和扩展。 6. **弹性伸缩**：容器可以快速启动和停止，适合实现应用的弹性伸缩。 7. **安全性**：容器提供了额外的隔离层，有助于提高应用...
GitLab CI/CD+Docker的CI/CD部署工作流
weixin_45685541的博客
12-17 1462
最近学习了GitLab的CI/CD，想结合GitLab runner和Docker来实现一个简单的自动化CI/CD方案👀
基于OpenStack+Docker设计与实现CI/CD
imgxr的博客
06-01 4117
本文所述内容的背景是，基于Docker容器技术的OpenStack研发、测试、运维及其相关的CI/CD、DevOps等活动。思想是相通的，读者可以取其可用部分用于自己的业务需求中。IaaS云和容器云不是可有可无、相互竞争的关系，而是相互弥补彼此缺陷的关系。容器改变了应用部署和管理的模式，众所周知，IaaS云通过提供基本的计算、存储和网络来运行虚拟机（VM），在IaaS（基础设施即服务）之上，还有P...
基于容器和微服务的端到端持续交付流水线
02-23
今天我分享的主题是《基于容器和微服务的持续交付流水线》，单从标题来看，汇聚了今年来的几大热点词汇，像容器、微服务和持续交付流水线，很多人也在关注这些技术领域如何能够有机的整合起来，为业务价值带来贡献，这也是我们今天要探讨的内容。今天的分享有三个方面：DevOps和持续交付构建持续交付流水线开源流水线演示分析这张图是去年在上海的Jenkins用户大会上，Jenkins的创始人KK在他的主题演讲中分享的，意思是说软件正在吃掉整个世界。无独有偶，之前微软公司的创始人盖茨提到微软公司的宗旨，也是说软件代表了世界的将来。对于这些行业领袖的观点，不知道大家是怎么理解的。现在越来越多的企业不再将IT视为成本
Kubernetes与微服务架构的端到端流水线驱动DevOps落地
02-21
云计算开源产业大会-景韵-基于Kubernetes与微服务架构的端到端流水线驱动DevOps落地 峰会ppt 材料
【微服务】——docker hub推送镜像
汤庆
09-01 344
一、前言 　　DockerHub 是一个由 Docker 公司运行和管理的基于云的存储库。它是一个在线存储库，Docker 镜像可以由其他用户发布和使用。有两种库：公共存储库和私有存储库。 docker images　＃查看本机docker镜像列表 docker run -it <image name>　　＃运行docker镜像 docker search nginx　　＃查找n...
DevOps、CI/CD流水线、Jenkins_Docker案例
zhongzhh8的博客
01-14 1618
微服务（Orchestration）架构 - 开发流水线与 DevOps 工具集 课程地址：18微服务orchestration架构—开发流水线与-devops-工具集 ppt给的要求三选一，我看来看去也就只有第一条能做而且是最简单的了：介绍 CI/CD Pipeline 原理、使用工具与案例。 一、DevOps（开发与运维 – Development and Operations） 参考DevO...
运维人少，如何批量管理上百个微服务、上千条流水线？
yaodunlin的博客
04-16 785
随着微服务和云原生技术的发展，一个业务系统往往由多个微服务应用组成，多个业务方向涉及几十上百应用。每个应用研发过程又划分为测试、预发、生产多条流水线，也即成百上千条流水线。而一个企业下通常只有 1～2 个运维或架构师负责这些应用的配置管理工作。该场景下你是否会遇到以下苦恼： 我们来看下Zadig 以应用为中心聚合管理资源环境、CI/CD 流程、人员权限等；提供应用模板，支持使用模板一键创建应用，快速初始化应用配置；支持应用模板修改批量升级应用，帮助你高效管理上百应用、上千条流水线，帮助企业研发流程和规范有效
天啦噜！看国外大神如何用Docker+Jenkins&CI/CD打造微服务架构？
cpongo011702
05-10 449
导读：Docker、微服务、持续交付是目前编程领域中最受欢迎的话题。在由几十个相互通信的微服务组成的环境中，特别重要的是测试、构建和部署过程的自动化。Docker是一种极好的微服务解决方案，因为它可以创建和运行独立的容器和服务。将Docker容器连接在一起，它们之间能够通信，确保所有的工具和微服务都在同一台机器上运行。1今天，将介绍如何使用流行的软件自动化工具：Jenkins，创建一个基本的持续交...
Docker服务编排05-k8s持续集成（CICD）springcloud微服务
liaomin416100569的专栏
02-19 2796
k8s持续集成（CICD）springcloud微服务CICD简介环境准备部署微服务 CICD简介 环境准备 部署微服务
github报错：git@github.com: Permission denied (publickey).fatal: Could not read from remote repository
waitle500的博客
02-16 6256
github报错：git@github.com: Permission denied (publickey).fatal: Could not read from remote repository
Jenkins配置使用LDAP的用户和密码登录
最新发布
qq_42750608的博客
09-01 1031
Jenkins配置使用LDAP的用户和密码登录
DevOps转型：基于Docker的自动化与微服务解决方案
通过容器编排工具（如Kubernetes），可以管理和调度这些容器，实现CI/CD流水线，确保代码变更能够迅速通过测试并部署到生产环境。 3. 微服务化：将应用程序拆分成独立的服务组件，每个服务有自己的容器化镜像，这样...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值