docker脚本镜像同步

已于 2023-09-17 20:16:41 修改
阅读量1.5k 收藏 2
点赞数
分类专栏： # docker应用 文章标签： docker 容器 运维
于 2022-08-15 21:01:47 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_44246980/article/details/126354205
版权

文章目录

脚本简介

  1. 基于运维统一脚本中，14、docker相关脚本下的镜像同步脚本
  2. 系统版本Centos7

脚本注解

  1. 该脚本为了减少认为修改镜像标签并推送至镜像仓库的冗余步骤，实现脚本一键式同步
  2. 脚本通过docker pull拉取镜像，docker tag 修改镜像，docker push 推送镜像，docker rmi 删除镜像，实现镜像同步
  3. 通过两种方式执行脚本：
    - sh Syncimages.sh harbor
    - sh Syncimages.sh run
  1. run 手动修改脚本内变量后执行
  2. harbor 通过harbor v2.0接口,获取镜像域名及信息后修改标签同步至其他镜像仓库中

前提准备

  1. 镜像仓库（Harbor）登录，通过/etc/hosts文件填写harbor的域名，并通过docker login 域名登录
  2. Harbor本人自动在主机上部署，用于部署harbor操作步骤自行百度
环境检查

如图所示，登录后可通过如下文件查看当前宿主机上登录的镜像仓库的信息
在这里插入图片描述

harbor镜像仓库界面

在这里插入图片描述

脚本变量修改
#################################################
#手动同步，需要提前修改，且镜像名称一一对应
#################################################
domain_old="registry.aliyuncs.com/google_containers" #待同步镜像的域名
image_name="pause:3.6 kube-apiserver:v1.19.0"        #镜像名称及版本，以空格为分隔符
#################################################################################
domain_new="registry.harbor.com:8081/test"           #通过镜像仓库的域名及项目名称,用于docker push
image_name_new="pause:3.6 kube-apiserver:v1.19.0"    #镜像名称及版本，以空格为分隔符，与上面一一对应
#Harbor信息
Harbor_Address=http://registry.harbor.com:8081      #Harbor主机地址，需要本地/etc/hosts解析
Harbor_domain="registry.harbor.com:8081"            #镜像域名，用于docker pull
Harbor_User=admin                                   #登录Harbor的用户
Harbor_Passwd=Harbor12345                           #登录Harbor的用户密码
Harbor_Project_List="bcbx"                          #Harbor项目名称，以空格未分隔，填写多个项目名称

执行方式

sh Syncimages.sh harbor 
sh Syncimages.sh run
验证脚本
  1. 把镜像仓库中项目名称为bcbx下所有的镜像通过到test目录
  2. 脚本执行前harbor镜像的数量如下图在这里插入图片描述
执行脚本

在这里插入图片描述
在这里插入图片描述

执行结果

在这里插入图片描述

脚本内容

#!/bin/bash
#所有者：北城半夏
#
#当前版本
#v1.0.1
#################################################################################
#                                   定义变量                                    #
#################################################################################
#日志文件
bashpath="$(cd `dirname $0`;pwd)"
#bashpath="/root/run/log/docker"
[ -d ${bashpath} ] || mkdir -p ${bashpath}
Images_File=${bashpath}/harbor-images-`date '+%Y-%m-%d'`.txt
#################################################
#手动同步，需要提前修改，且镜像名称一一对应
domain_old="registry.aliyuncs.com/google_containers"
image_name="pause:3.6 kube-apiserver:v1.19.0"
#################################################################################
domain_new="registry.harbor.com:8081/test"
image_name_new="pause:3.6 kube-apiserver:v1.19.0" 
#################################################
#Harbor信息
Harbor_Address=http://registry.harbor.com:8081      #Harbor主机地址，需要本地/etc/hosts解析
Harbor_domain="registry.harbor.com:8081"
Harbor_User=admin                                   #登录Harbor的用户
Harbor_Passwd=Harbor12345                           #登录Harbor的用户密码
Harbor_Project_List="bcbx"                          #Harbor项目名称，以空格未分隔，填写多个项目名称
#################################################################################
#                                   定义函数                                    #
#################################################################################
info(){
  echo -e "\033[35m 【`hostname` `date '+%Y-%m-%d %H:%M:%S'`】\033[0m" "\033[36m$1\033[0m "
}
info2(){
  echo -e "\033[32m 【`hostname` `date '+%Y-%m-%d %H:%M:%S'`】\033[0m" "\033[91m$1\033[0m "
}
info4(){
  echo -e "\033[35m 【`hostname` `date '+%Y-%m-%d %H:%M:%S'`】\033[0m" "\033[94m$1\033[0m "
}
info3(){
 echo -e "\033[36m------------------------------------------------------------------------------\033[0m" 
}
#pull旧的镜像到镜像仓库中
docker_pull(){
    local domain=$1 image_name=${image_old_name[*]}
    for i in ${image_name}
       do
        image_old_lable=`docker images --format  {{.Repository}}:{{.Tag}}|grep ${domain}/${i}`
        if [ -z ${image_old_lable} ] ;then
            docker pull ${domain}/${i}
            #echo "docker pull ${domain}/${i}"
        fi
    done
    [ $? -eq 0 ] && info "镜像pull成功" && info3

}
#tag修改标签
docker_tag(){
    local domain_old=$1  domain_new=$2
    for i in `seq 0 ${new_num}`
       do
       docker tag ${domain_old}/${image_old_name[i]} ${domain_new}/${image_new_name[i]}
       #echo "docker tag ${domain_old}/${image_old_name[i]} ${domain_new}/${image_new_name[i]}"
       [ $? -eq 0 ] && info "镜像tag ${domain_old}/${image_old_name[i]} ${domain_new}/${image_new_name[i]} 成功"
    done
    [ $? -eq 0 ] && info3
}
#tag修改标签
docker_push(){
    local domain_new=$1 image_name=${image_name_new}
    for i in ${image_name}
       do
       docker push ${domain_new}/${i}
      # echo "docker push ${domain_new}/${i}"
       [ $? -eq 0 ] && info "镜像push ${domain_new}/${i} 成功"
    done
    [ $? -eq 0 ] && info3
}
docker_rmi(){
    local domain_new=$1 image_name=${image_name_new}
    for i in ${image_name}
       do
       docker rmi ${domain_new}/${i}
       #echo "docker rmi ${domain_new}/${i}"
       [ $? -eq 0 ] && info2 "RMI image ${domain_new}/${i}成功"
    done
    [ $? -eq 0 ] && info3
}

#定义数组元素及变量
array_run(){
  #定义数组（old image name）
  for i in ${image_name};do image_old_name[${#image_old_name[*]}]=$i ;done
  for i in ${image_name_new};do image_new_name[${#image_new_name[*]}]=$i ;done
  old_num=$(( `echo ${#image_old_name[*]}` -1 ))
  new_num=$(( `echo ${#image_new_name[*]}` -1 ))
  if [ ${old_num} -eq ${new_num} ];then
     info "image name load success"
  fi
}
#################################################################################
harbor_get_list(){
if [ -f  ${Images_File} ];then
  rm -rf ${Images_File}
fi
for Project in $Harbor_Project_List;do
   # 循环获取项目下所有的镜像
   Image_Names=$(curl -u ${Harbor_User}:${Harbor_Passwd} -H "Content-Type: application/json" -X GET ${Harbor_Address}/api/v2.0/projects/$Project/repositories -k | python -m json.tool | grep name | awk '/"name": /' | awk -F '"' '{print $4}')
    for Image in $Image_Names;do
        # 循环获取镜像的版本（tag)
        Image_Tags=$(curl -u ${Harbor_User}:${Harbor_Passwd}  -H "Content-Type: application/json"   -X GET  ${Harbor_Address}/v2/$Image/tags/list  -k |  awk -F '"'  '{print $8,$10,$12}')
        for Tag in $Image_Tags;do
            # 格式化输出镜像信息
            echo "${Harbor_domain}/$Image:$Tag" >> ${Images_File}
        done
    done
done
}
harbor_pull(){
      #pull镜像
    info "Pull image to local machine"
    for i in ${image_name}
      do
        docker pull ${i}
    done
}
harbor_tag(){
 #修改tag镜像
    info3
    info "Modify mirror label"
    for i in `seq 0 ${old_num}`
      do
         name=`echo ${image_old_name[i]} |awk -F "/" '{print $NF}'`
         docker tag  ${image_old_name[i]} ${domain_new}/${name}
      done
}
harbor_push(){
  #推送镜像到仓库中
    info3
    info "Push image to warehouse"
    for i in `seq 0 ${old_num}`
      do
         name=`echo ${image_old_name[i]} |awk -F "/" '{print $NF}'`
         docker push ${domain_new}/${name}
      done
}
harbor_rmi(){
      #删除本地镜像
    info3
    info "Delete local image"
    for i in `seq 0 ${old_num}`
      do
         name=`echo ${image_old_name[i]} |awk -F "/" '{print $NF}'`
         docker rmi ${domain_new}/${name}
         docker rmi ${image_old_name[i]}
    done
}


#################################################################################
#通过harbor v2.0的接口返回镜像信息后自动同步
harbor(){
    harbor_get_list
    info3
    image_name=`cat ${Images_File}`
    for i in ${image_name};do image_old_name[${#image_old_name[*]}]=$i ;done
    old_num=$(( `echo ${#image_old_name[*]}` -1 ))
    harbor_pull
    harbor_tag
    harbor_push
    harbor_rmi
}
#################################################################################
#手动修改变量后执行的方式
run(){
  #加载数据元素
  array_run
  docker_pull ${domain_old}
  docker_tag  ${domain_old} ${domain_new}
  docker_push ${domain_new}
  echo -ne "\033[31m是否删除修改前后的镜像,节约空间(yes/no)\033[0m"
  read -p "" test
  if [ yes == ${test} ];then
     info4 "删除${domain_old}镜像"
     docker_rmi ${domain_old}
     info4 "删除${domain_new}镜像"
     docker_rmi ${domain_new}
  fi

}
log(){
  info2 "sh $0 harbor           通过harbor v2.0接口"
  info2 "sh $0 run              通过添加镜像域名、标签等方式实现镜像通过"
}
#rmi=1
#run
start_image(){
 local install=$1
 if [ -z  ${install} ];then
    log
    echo -ne "\033[31m请输入执行方式:(harbor/run)\033[0m"
    read -p "" install
    start_image ${install}
  else
    case $install in 
       'harbor')
           harbor;;
       'run')
           run;;
   esac
fi

}
start_image $1
北城 半夏
关注
  • 0
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
使用docker将镜像发布到阿里云
qq_74298120的博客
09-26 272
镜像可以通过Dockerfile文件、从Docker Hub上下载、从其他Docker容器中导出等方式生成。镜像通常是由分层的文件系统组成，每一层都是由前一层的文件系统进行修改而来。这种分层的设计使得Docker镜像的体积非常小，以及镜像的复用性非常高，可以快速地部署、移植和共享。 学习使用 Docker 发布镜像是学习 Docker 的重要一步，以下是我的一些学习心得： 1、镜像标签的命名：在发布镜像前需要给镜像打上标签，标签的命名应该遵循如下规则：registry-url/namespace/repo
VisualSVN Server仓库镜像同步脚本
09-23
本脚本可在一台Windows备份服务器上创建某个VisualSVN Server的镜像仓库，实现如下功能： 1. 导入源SVN服务器上的已有仓库和数据到备份服务器 2. 通过定时执行脚本，把源SVN服务器的新增提交同步到备份服务器 备份...
docker registry 镜像同步的实现思路
09-29
主要介绍了docker registry 镜像同步的相关知识，本文给大家介绍的非常详细，对大家的学习或工作具有一定的参考借鉴价值,需要的朋友可以参考下
容器镜像外网同步方案
weixin_44770684的博客
06-16 565
2、当docker需要访问国外的dockerhub等镜像仓库，可通过在国外或香港区域服务器部署nexus服务来作为docker的代理服务器( nexus 3版本之后才支持docker镜像代理)。nexus不仅可以作为docker镜像的代理仓库还常用于作为maven的中央仓库，解决开发过程中直接访问外网或者国外网络的代理，加快了开发代码构建的速度和解决网络问题。1、当docker部署在内网无法访问公网的仓库，需要在可访问公网的服务器部署nexus服务，并且打通docker访问nexus服务的网络。
docker registry 镜像同步
因上努力，果上随缘。但行好事，莫问前程。
08-10 819
下面的脚本做了一些简化，因为我们的 azure container registry 上的数量不多，只有五六十个镜像，而且镜像只有 latest 的 tag，没有其他 tag ，所以把上面的步骤做了简化，并没有分页获取所有的镜像，也没有获取所有的 tag，实际使用的话还请自行修改后使用。一切不是自动化的运维都是耍流氓，很有可能以后会有类似的需求，不如写个脚本自动化的跑吧。如果要同步的镜像比较多，考虑使用阿里云的镜像同步工具去同步。来获取，也可以分页，类似于上面获取镜像列表，可以通过。...
docker的镜像创建过程
.銀河狙擊手的博客
03-09 1502
一. 管理 Docker 容器中数据 　　　　管理 Docker 容器中数据主要有两种方式：数据卷（Data Volumes）和数据卷容器（DataVolumes Containers）。　　①数据卷 　　　　数据卷是一个供容器使用的特殊目录，位于容器中。 　　　　可将宿主机的目录挂载到数据卷上，对数据卷的修改操作立刻可见，并且更新数据不会影响镜像，从而实现数据在宿主机与容器之间的迁移。 　　　　数据卷的使用类似于 Linux下对目录进行的 mount 操作。 　　　　需求：宿主机目录 /var/ww
两台机器间docker镜像同步脚本
sinat_36759535的博客
08-29 1188
使用场景 在工作遇到过需要在一台不能上网的机器上面进行rancher 部署，这个时候，需要把另外一台之前已经安装下载过镜像的docker镜像拷贝到这台机器。 有一种最直接的方式是，我们手工在远端机器上面执行docker save -o xx.tar xx_image的方式导出来，然后在手工传到我们进行rancher部署的机器上面 因为想简便的做法看有没有直接在两台机器上直接进行同步的脚本之类的工具。 正巧在google上搜docker image sync 在github上找到了一个方法 现在把连接放在下面
Docker 镜像的创建
wyq2070857323的博客
04-28 1475
DDockerfile是一个特殊的文件系统，除了提供容器运行时所需的程序、库、资源、配置等文件外，还包含了一些为运行时准备的一些配置参数（如匿名卷、环境变量、用户等）。镜像不包含任何动态数据，其内容在构建之后也不会被改变。Dockerfile是一个文本文件，其内包含了一条条的指令(Instruction)，每一条指令构建一层，因此每一条指令的内容，就是描述该层应当如何构建。
shell 更新docker镜像
takujo的博客
08-16 501
更新tag为latest的镜像，并删除旧镜像
【Docker】镜像与docker数据卷
llg___的博客
05-05 1654
容器之间配置信息的传递， 数据卷容器的生命周期一直持续到没有容器使用为止（复制拷贝的关系）且一旦你持久化到了本地，这个时候，本地的数据是不会删除的！
用GitHub Actions制作Docker镜像
2401_84046645的博客
04-22 635
阿里伤透我心，疯狂复习刷题，终于喜提offer 哈哈~好啦，不闲扯了1、JAVA面试核心知识整理（PDF）：包含JVMJAVA集合JAVA多线程并发，JAVA基础，Spring原理微服务，Netty与RPC，网络，日志，ZookeeperKafkaRabbitMQ，Hbase，MongoDB设计模式负载均衡数据库一致性哈希JAVA算法数据结构，加密算法，分布式缓存，Hadoop，Spark，Storm，YARN，机器学习，云计算共30个章节。2、Redis学习笔记及学习思维脑图。
gcr.io镜像：gcr.io的kubernetes docker镜像
02-19
将docker的gcr.io映像同步到您的私有注册表/ dockerhub。 同步命名空间 用法 您可以使用此脚本将gcr.io的名称空间同步为所需的名称。 分叉这个项目 获取Google Cloud Public images注册表的cookie 并导出为env GCR_...
基于Docker Compose构建的MySQL MHA集群.zip
11-07
MHA由一系列的Python脚本和守护进程组成，可以在发生故障时快速恢复服务，减少业务中断时间。 【Docker Compose与MySQL】 Docker Compose使得在Docker容器中配置和管理复杂应用变得更加简单。在MySQL MHA集群中，每...
docker安装redis4.0.10-单点持久化详细笔记
07-17
首先，需要上传 Redis 4.0.10 镜像文件 redis_4.0.10.tar，然后使用 docker load 命令将其加载到 Docker 中。 [root@localhost ~]# docker load -i redis_4.0.10.tar 加载完成后，可以使用 docker images 命令来...
用于操作原生k8s 进行批量的镜像上传、重命名、导出镜像文件为yaml批量导入等功能
05-12
k8s 运维 devops 运维 docker 运维 比较实用的小工具,服务器直接可以跑的脚本支持生产环境直接运行
如何拉取dockerhub镜像 手把手教程
weixin_59164654的博客
06-11 1757
记得修改username和password这两行，修改为刚刚的阿里云账号和设置的固定访问密码，最后一行需要更改为源和目标的仓库名称和镜像名称。再点击仓库中的“Action”，我这里是已经有工作流了，你们的新仓库会有一个选项“simple workflow”，新建一个workflow。每次修改文件并提交就会触发一次脚本执行，所以后续每次只要我们想拉哪个镜像到阿里镜像仓库只需要修改镜像名称即可。这里我拉取rockylinux的镜像到阿里的镜像仓库，测试成功，接下来我们在服务器上从阿里镜像仓库拉取镜像。
如何将Python应用容器化到Docker中
2402_84885073的博客
07-23 458
将Python应用容器化到Docker中是一个常见且有用的做法，它可以帮助你轻松地在不同的环境中部署和运行你的应用，无需担心环境差异带来的问题。
docker略览
最新发布
whyeahu的博客
07-23 702
使用 Docker Compose 可以将多个 Docker 容器组合成一个应用程序，并定义它们之间的关系和依赖。它使用一个 YAML 文件来配置应用程序的服务、网络和卷等，并使用一条命令启动、停止和管理整个应用程序的容器。使用 Dockerfile，你可以定义所需的基础镜像、安装软件包、复制文件、设置环境变量、运行命令等一系列操作，最终生成一个包含应用程序和其依赖的可运行镜像。在 Docker 中，你可以创建自定义网络，或者使用默认的网络。Docker 网络类型。
docker registry同步docker hub 镜像
01-15
要将Docker Registry与Docker Hub镜像同步，可以通过以下步骤进行操作： 1. 首先，在本地或者云服务器上搭建一个Docker Registry，可以使用官方提供的Docker Registry镜像或者第三方工具。 2. 在Docker Registry中创建一个新的镜像仓库，用于存储将要同步的Docker Hub镜像。 3. 在Docker Hub上选择需要同步的镜像，可以使用官方的命令行工具或者第三方工具进行选择。 4. 在本地或者云服务器上执行一个定时任务或者脚本，用于将Docker Hub上选定的镜像同步到本地的Docker Registry。 5. 在定时任务或脚本中，可以使用Docker CLI或者Docker API来拉取Docker Hub上的镜像，并且将其推送到本地的Docker Registry。 6. 在同步完成后，可以使用Docker Registry中的镜像作为本地的镜像源，用于构建和运行容器。 需要注意的是，镜像同步的时间间隔和具体同步方式可以根据实际需求进行调整。此外，为了确保同步的准确性和及时性，需要保持Docker Hub和Docker Registry的网络连接稳定，并定期检查同步日志以及更新同步脚本。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

北城 半夏

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值