gitlab-cicd自动化:编译-打包-上传-部署

最新推荐文章于 2024-07-25 12:00:16 发布
最新推荐文章于 2024-07-25 12:00:16 发布
阅读量3.7k 收藏 7
点赞数 2
文章标签： ci/cd
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_42873928/article/details/119040909
版权

gitlab-cicd自动化:编译-打包-上传-部署

1.安装gitlab-runner

1.安装下载源

# For Debian/Ubuntu/Mint
curl -L "https://packages.gitlab.com/install/repositories/runner/gitlab-runner/script.deb.sh" | sudo bash

# For RHEL/CentOS/Fedora
# curl -L "https://packages.gitlab.com/install/repositories/runner/gitlab-runner/script.rpm.sh" | sudo bash

2.安装

sudo apt-get install gitlab-runner
systemctl status gitlab-runner

在这里插入图片描述

2.注册runner

2.1找到gitlab上面URL和token

在这里插入图片描述

2.2注册

# 注册
gitlab-runner register

在这里插入图片描述

2.3 注册成功

在这里插入图片描述

3.使用docker方式编译部署(独立环境)

配置免sudo输入密码
配置免密登录

ps -ef|grep gitlab-runner

在这里插入图片描述

在这里插入图片描述

4.编写Dockerfile

在这里插入图片描述

5.编写Makefile

cat >> Makefile << EOF
GO=go
GOFLAG=-a -installsuffix cgo
PROJ=device-manager

# 当前系统的默认go配置
GOOS=$(shell go env GOOS)
GOARCH=$(shell go env GOARCH)



repo=$(PROJ)
version=$(shell cat ./version/VERSION)
time=$(shell date "+%m/%d/%Y %R %Z")


LDFLAG=-ldflags '-X "$(repo)/version.buildVersion=$(version)" -X "$(repo)/version.buildTime=$(time)"'

#IMAGE_NAME=registry.jiangxingai.com:5000/$(PROJ)
#TAG=x8664_cpu_$(version)
IMAGE_NAME=harbor.jiangxingai.com/library/aiot/$(PROJ)/x8664/others
TAG=$(version)
LATEST=latest

# 调用方法 $(call BUILD_PROC,goos,goarch)
define BUILD_PROC
	CGO_ENABLED=0 GOOS=$(1) GOARCH=$(2) $(GO) build $(GOFLAG) $(LDFLAG) -o $(PROJ) $<
endef


.PHONY: build
build: main.go
	$(call BUILD_PROC,$(GOOS),$(GOARCH))

.PHONY: linux-amd64
linux-amd64: main.go
	$(call BUILD_PROC,linux,amd64)

.PHONY: linux-arm64
linux-arm64: main.go
	$(call BUILD_PROC,linux,arm64)

.PHONY: linux-arm
linux-arm: main.go
	$(call BUILD_PROC,linux,arm)

docker-image: check_version
	# docker pull $(IMAGE_NAME):$(LATEST) || true
	docker build -t $(IMAGE_NAME):$(TAG) .
	# docker tag $(IMAGE_NAME):$(TAG) $(IMAGE_NAME):$(LATEST)

docker-push: docker-image
	docker push $(IMAGE_NAME):$(TAG)
	# docker push $(IMAGE_NAME):$(LATEST)

check_version:
ifeq ($(version),)
	$(error No version tag found)
endif

.PHONY: clean
clean:
	go clean

it: build docker-image docker-push


EOF

在这里插入图片描述

6.编写cicd文件

cat >> .gitlab-ci.yml << EOF

image: "golang:latest"

stages:
  - build
  - docker

build:
  stage: build
  script:
    - make build
  artifacts:
    paths:
      - /
  only:
    - develop

docker:
  image: docker:dind
  stage: docker
  script:
    - apk update
    - apk add make
    - apk add openssh-client
    - docker login harbor.jiangxingai.com --username $IOTEDGE_DOCKER_USERNAME --password $IOTEDGE_DOCKER_PASSWORD
    - make docker-push
    - ssh -tt ubuntu@10.51.4.3 "bash /home/ubuntu/Aiot/reload.sh"
  dependencies:
    - build
  only:
    - develop
EOF

在这里插入图片描述

7.reload.sh脚本(放在部署位置)

cat >> reload.sh << EOF

#!/bin/bash
cd /home/jx/Aiot

container_name="aiot-user-center-1.0.0"
image="harbor.jiangxingai.com/library/aiot/user-center/x8664/others"

sudo docker stop $container_name
sudo docker rm $container_name
image_id=$(sudo docker images |grep $image|awk -F ' ' '{print $3}')
if [ -x $image_id ]
then
    echo "===================================================="
    echo "没有获取到镜像id"
    echo "===================================================="
else
    sudo docker rmi $image_id
fi

sudo docker-compose up -d
echo "===================================================="
echo "部署成功"
echo "===================================================="

EOF

在这里插入图片描述

8-多种架构编译和cicd

Makefile

cat >> Makefile << EOF
GO=go
GOFLAG=-a -installsuffix cgo
PROJ=file-storage-proxy

# 当前系统的默认go配置
GOOS=$(shell go env GOOS)
GOARCH=$(shell go env GOARCH)



repo=$(PROJ)
version=$(shell cat ./version/VERSION)
time=$(shell date "+%m/%d/%Y %R %Z")


LDFLAG=-ldflags '-X "$(repo)/version.buildVersion=$(version)" -X "$(repo)/version.buildTime=$(time)"'

IMAGE_PROJ=aiot/$(PROJ)
# IMAGE_NAME=registry.jiangxingai.com:5000/$(IMAGE_PROJ)
# TAG=x8664_cpu_$(version)
#IMAGE_NAME=harbor.jiangxingai.com/library/$(IMAGE_PROJ)/arm32/others
IMAGE_NAME=harbor.jiangxingai.com/library/$(IMAGE_PROJ)
TAG=$(version)
LATEST=latest

# 调用方法 $(call BUILD_PROC,goos,goarch)
define BUILD_PROC
	CGO_ENABLED=0 GOOS=$(1) GOARCH=$(2) $(GO) build $(GOFLAG) $(LDFLAG) -o $(PROJ) $<
endef

define BUILD_IMAGE
	docker pull $(IMAGE_NAME)/$(1)/others:$(LATEST) || true
	docker buildx build -t $(IMAGE_NAME)/$(1)/others:$(TAG) --platform=$(2) -o type=docker .
	docker tag $(IMAGE_NAME)/$(1)/others:$(TAG) $(IMAGE_NAME)/$(1)/others:$(LATEST)
	docker push $(IMAGE_NAME)/$(1)/others:$(TAG)
    docker push $(IMAGE_NAME)/$(1)/others:$(LATEST)
endef

define PUSH_IMAGE
endef

.PHONY: build
build: main.go
	$(call BUILD_PROC,$(GOOS),$(GOARCH))

.PHONY: linux-amd64
linux-amd64: main.go
	$(call BUILD_PROC,linux,amd64)

.PHONY: linux-arm64
linux-arm64: main.go
	$(call BUILD_PROC,linux,arm64)

.PHONY: linux-arm
linux-arm: main.go
	$(call BUILD_PROC,linux,arm)

docker-image-amd64: check_version
	$(call BUILD_IMAGE,x8664,linux/amd64)

docker-image-arm64: check_version
	$(call BUILD_IMAGE,arm64,linux/arm64)

docker-image-arm32: check_version
	$(call BUILD_IMAGE,arm32,linux/arm)


check_version:
ifeq ($(version),)
	$(error No version tag found)
endif

.PHONY: clean
clean:
	go clean

EOF

.gitlab-ci.yml

cat >> .gitlab-ci.yml <<  EOF

image: "golang:latest"

stages:
  - build-amd64
  - docker-amd64
  - build-arm32
  - docker-arm32

build-amd64:
  image: "golang:latest"
  stage: build-amd64
  script:
    - make linux-amd64
  artifacts:
    paths:
      - /
  only:
    - yyl_dev

docker-amd64:
  image: docker:19.03
  stage: docker-amd64
  script:
    - apk add make
    - apk add openssh-client
    - docker login harbor.jiangxingai.com --username $IOTEDGE_DOCKER_USERNAME --password $IOTEDGE_DOCKER_PASSWORD
    - export DOCKER_CLI_EXPERIMENTAL=enabled
    - export DOCKER_BUILDKIT=1
    - docker build --platform=local -o . git://github.com/docker/buildx
    - mkdir -p ~/.docker/cli-plugins && mv buildx ~/.docker/cli-plugins/docker-buildx
    - docker buildx ls
    - make docker-image-amd64
  dependencies:
    - build-amd64
  only:
    - yyl_dev


build-arm32:
  image: "golang:latest"
  stage: build-arm32
  script:
    - make linux-arm
  artifacts:
    paths:
      - /
  only:
    - yyl_dev

docker-arm32:
  image: docker:19.03
  stage: docker-arm32
  script:
    - apk add make
    - apk add openssh-client
    - docker login harbor.jiangxingai.com --username $IOTEDGE_DOCKER_USERNAME --password $IOTEDGE_DOCKER_PASSWORD
    - export DOCKER_CLI_EXPERIMENTAL=enabled
    - export DOCKER_BUILDKIT=1
    - docker build --platform=local -o . git://github.com/docker/buildx
    - mkdir -p ~/.docker/cli-plugins && mv buildx ~/.docker/cli-plugins/docker-buildx
    - make docker-image-arm32
  dependencies:
    - build-arm32
  only:
    - yyl_dev


EOF
yylの博客
关注
  • 2
    点赞
  • 踩
  • 7
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
gitlab-cicd(devops)搭建测试案例.docx
03-11
GitLab CI/CD 是一种持续集成和持续部署（CI/CD）工具，它与GitLab仓库紧密集成，可自动化软件开发流程，包括编译、测试、部署等步骤。本文将详细介绍如何在GitLab环境下搭建CI/CD环境，并通过实际案例演示其工作...
gitlab-ci-cd-templates：用于Java python和nodejs的gitlab CICD管道模板\ n Java python及node.js项目gitlab CICD模板
02-04
GitLab CI/CD（持续集成/持续部署）是GitLab平台提供的一项强大的自动化工具，它允许开发者通过定义`.gitlab-ci.yml`文件来自动化构建、测试和部署过程。本资源"gitlab-ci-cd-templates"是专为Java、Python和Node.js...
gitlab cicd自动打包发布到私有仓库
ice_bird的专栏
03-29 3456
首先安装gitlab runner 查看安装说明 sudo curl -L --output /usr/local/bin/gitlab-runner https://gitlab-runner-downloads.s3.amazonaws.com/latest/binaries/gitlab-runner-linux-amd64 # Give it permission to execute sudo chmod +x /usr/local/bin/gitlab-runner # Cr.
Ubuntu中Gitlab + Gitlab-CI + Docker + Fastlane完成Android自动化编译和打包
文韬武略的专栏
06-02 1087
Android开发过程中持续集成是一项非常重要和必要的工作。持续集成指的是通过自动化的方式将开发、测试和部署过程整合在一起，实现代码的自动构建和测试，并快速反馈给开发人员，从而加快软件开发周期，提高软件质量和稳定性。以下是持续集成的重要性和必要性：提高开发效率和质量：持续集成可以自动构建和测试代码，快速检测出问题，并及时反馈给开发人员，这样可以减少手动测试的工作量，提高效率和质量。降低错误率：持续集成可以避免由于手动构建和测试过程中的疏忽而引入错误，保证了代码的准确性和可靠性，降低了错误率。
CICD：搭建gitlab-runner服务实现自动化编译打包上传
qq_29022265的博客
05-17 483
通过ruuner实现，在gitlab上的仓库打了tag后自动触发编译、打包、上传等自动化发版流程。 gitlab-runner依赖项很少可以直接通过deb包的方式部署到物理机。
gitlab-cicd详解(附带docker+k8s版本)
u010074572的博客
03-07 1147
定义pipeline的全部阶段（stage），阶段内的全部任务并行执行，全部任务成功开始下一阶段任务，任何阶段内的任意job失败都会导致pipeline失败，所有stage，job执行成功后pipeline会显示pass。部署Deployment: 管理pod，创建、删除、更新pod，以确保 Pod 的副本数始终处于指定状态，用Deployment启动的容器，如果直接删除Pod则会在被删除后自动再次创建pod，只有这个Deployment被删除才能永久删除pod。可以使用正则表达式指定，也可以指定关键字。
gitlab--基础--5.3--CICD--gitlab-ci.yml关键字
zhou920786312的博客
08-23 2003
如果有些值不想在配置文件中显示，比如密码什么的，可以在代码仓库中自定义变量，跟在.gitlab-ci.yml配置变量效果是一样的when：何时执行删除或停止环境作业environment:name： 环境名称需要与上面的 review_app 作业保持一致，即 review 评审环境environment:action：执行何种动作，stop 停止环境stage ：与 review_app 作业的阶段保持一致，都是 deploy。
使用gitlab的cicd自动化部署vue项目shell流程踩坑之路
12-06 2206
包括：1. git clone 仓库地址2. npm install / yarn 安装依赖3. cp -rf dist/ /var/www/html如果以上步骤都没有出错，那再安装gitlab-runner进行自动化构建
Gitlab-ci:从零开始的前端自动化部署
油墨香^-^的博客
01-16 359
以gitlab-ci为例：(1) 通过在项目根目录下配置**.gitlab-ci.yml**文件，可以控制ci流程的不同阶段，例如install/检查/编译/部署服务器。gitlab平台会扫描.gitlab-ci.yml文件，并据此处理ci流程img(2) ci流程在每次团队成员后之后触发。每当你push/merge一次，gitlab-ci都会检查项目下有没有.gitlab-ci.yml文件，如果有，它会执行你在里面编写的脚本，并完整地走一遍从「eslint检查=>编译 =>部署服务器」的流程。
golang的gitlab-ci配置 Docker搭建GitLab-runner
tflasd1157的博客
08-23 1979
介绍 GitLab-runner环境搭建 获取镜像 执行以下命令，获取gitlab-runner 镜像 docker pull gitlab/gitlab-runner docker pull 启动 执行以下命令启动gitlab-ruuner sudo docker run -d / --name gitlab-runner / --restart always / -v /...
code-deploy-sample:Spring启动CICD연습
03-09
6. **构建工具**: Maven和Gradle是Java开发中的常用构建工具，用于自动化编译、打包和测试过程。 7. **单元测试与集成测试**: JUnit和Mockito是Java开发中的测试框架，用于编写和运行单元测试。Spring Boot Test和...
devops-ci-cd-exercise:CICD中的练习
03-16
总结，"devops-ci-cd-exercise"是一个针对Java项目的CICD实践，涵盖了从代码合并到自动化测试、构建、部署以及后续监控的整个流程。通过这个练习，学习者可以深入理解如何在Java环境中实施高效的DevOps实践，提高...
Maven-CICD项目
02-21
Maven-CICD项目旨在通过Maven的强大功能实现Java项目的自动化构建和CICD流程，提高开发效率，确保代码质量和稳定性。通过合理配置和实践，开发者可以构建出高效、可靠、易于维护的软件工程。在实际操作中，应结合...
学习笔记7：gitlab ci/cd
ALex_zry的博客
07-24 562
GitLab CI/CD 是 GitLab 提供的持续集成和持续部署工具。它是一种自动化的流程，用于在软件开发过程中自动构建、测试和部署应用程序。通过使用 GitLab CI/CD，开发团队可以自动化软件开发的各个阶段，提高开发效率，减少人为错误，并确保代码的质量和一致性。
Jenkins+Gitlab持续集成综合实战
Richardlygo的博客
07-25 2827
一、持续集成应用背景： DevOps：（英文Development（开发）和Operations（技术运营）的组合）是一组过程、方法与系统的统称，用于促进开发（应用程序/软件工程）、技术运营和质量保障（QA）部门之间的沟通、协作与整合。它的出现是由于软件行业日益清晰地认识到：为了按时交付软件产品和服务，开发和运营工作必须紧密合作； 应用背景： 一个开发单打独斗，撸代码，开发网站，自由自...
物理机 gogs+jenkins+sonarqube 实现CI/CD
Richardlygo的博客
07-25 2015
其中ref就是推送过去的分支啦。以下的推送的内容都是可以通过文章后面设置jenkins变量来获得的。历史版本下载地址：　　http://www.oracle.com/technetwork/java/javase/archive-139210.html。当前最新版本下载地址：http://www.oracle.com/technetwork/java/javase/downloads/index.html。上述方法之所以安装不成功，主要是golang版本和golangci-lint版本不一致导致导致的；
CI/CD学习之路
最新发布
Richardlygo的博客
07-25 408
https://mp.weixin.qq.com/mp/appmsgalbum?__biz=Mzg4NDg0MjQ0MQ==&action=getalbum&album_id=3433192036428447744&scene=173&subscene=&sessionid=svr_0b1e7fe1d6b&enterid=1721879847&from_msgid=2247485821&from_itemidx=1&count=3&nolastread=1#wechat_redirectcentos7搭建C
gitlab-cicd
08-17
GitLab CI/CD 是一个开源的持续集成和持续交付平台，它是 GitLab 的一部分。它允许开发团队自动化构建、测试和部署他们的应用程序。 使用 GitLab CI/CD，您可以在代码仓库中定义一个或多个称为管道的工作流程。管道由一系列称为作业的步骤组成，每个作业可以运行在特定的环境中，并执行一些任务，如编译代码、运行测试或部署应用程序。 您可以通过 GitLab CI/CD 的配置文件（.gitlab-ci.yml）来定义管道和作业。配置文件中包含了各个作业的定义、环境变量、脚本命令等。当您提交代码到 GitLab 仓库时，GitLab CI/CD 将根据配置文件中的定义自动构建和测试您的代码，并根据设置的规则自动部署到预定义的环境中。 除了基本的构建和测试功能，GitLab CI/CD 还支持许多高级功能，如并行作业、多个 Runner（执行器）的使用、敏捷开发流程的支持等。它还可以与其他工具和服务集成，如容器化平台（Docker、Kubernetes）、云服务商（AWS、Azure、GCP）等。 总的来说，GitLab CI/CD 是一个功能强大的工具，可以帮助开发团队实现持续集成和持续交付，提高开发效率和软件质量。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值