docker镜像管理基础

1. 镜像的概念

镜像可以理解为应用程序的集装箱，而docker用来装卸集装箱。
docker镜像含有启动容器所需要的文件系统及其内容，因此，其用于创建并启动容器。

docker镜像采用分层构建机制，最底层为bootfs，其上为rootfs

• bootfs：用于系统引导的文件系统，包括bootloader和kernel，容器启动完成后会被卸载以节约内存资源
• rootfs：位于bootfs之上，表现为docker容器的根文件系统
  • 传统模式中，系统启动之时，内核挂载rootfs会首先将其挂载为“只读”模式，完整性自检完成后将其重新挂载为读写模式
  • docker中，rootfs由内核挂载为“只读”模式，而后通过“联合挂载”技术额外挂载一个“可写”层

当删除容器时，这个容器自有的“可写”层会一起被删除

2. docker镜像层

3. docker存储驱动

docker提供了多种存储驱动来实现不同的方式存储镜像，下面是常用的几种存储驱动：

• AUFS
• OverlayFS
• Devicemapper
• Btrfs
• VFS

3.1 AUFS

AUFS（AnotherUnionFS）是一种Union FS，是文件级的存储驱动。AUFS是一个能透明覆盖一个或多个现有文件系统的层状文件系统，把多层合并成文件系统的单层表示。简单来说就是支持将不同目录挂载到同一个虚拟文件系统下的文件系统。这种文件系统可以一层一层地叠加修改文件。无论底下有多少层都是只读的，只有最上层的文件系统是可写的。当需要修改一个文件时，AUFS创建该文件的一个副本，使用CoW将文件从只读层复制到可写层进行修改，结果也保存在可写层。在Docker中，底下的只读层就是image，可写层就是Container。

AUFS文件系统据说有3W行代码，而ext4文件系统却只有4000-5000行左右代码，这些代码是要被整合进内核的，后来AUFS申请要被合并进内核代码的时候，linuz觉得它这代码太过臃肿，于是拒绝了。因此AUFS这个文件系统一直以来就不是linux内核中自有的文件系统，想用AUFS这个文件系统的话，必须自己向内核打补丁并去编译使用它，但redhat系列的操作系统一向以稳定著称，不会干这种出格的事，所以在redhat系列操作系统中使用AUFS并无可能。而ubuntu上的docker默认使用的就是AUFS。

3.2 OverlayFS

Overlay是Linux内核3.18后支持的，也是一种Union FS，和AUFS的多层不同的是Overlay只有两层：一个upper文件系统和一个lower文件系统，分别代表Docker的镜像层和容器层。当需要修改一个文件时，使用CoW将文件从只读的lower复制到可写的upper进行修改，结果也保存在upper层。在Docker中，底下的只读层就是image，可写层就是Container。目前最新的OverlayFS为Overlay2。

AUFS和Overlay都是联合文件系统，但AUFS有多层，而Overlay只有两层，所以在做写时复制操作时，如果文件比较大且存在比较低的层，则AUSF会慢一些。而且Overlay并入了linux kernel mainline，AUFS没有。目前AUFS已基本被淘汰。

3.3 DeviceMapper

Device mapper是Linux内核2.6.9后支持的，提供的一种从逻辑设备到物理设备的映射框架机制，在该机制下，用户可以很方便的根据自己的需要制定实现存储资源的管理策略。AUFS和OverlayFS都是文件级存储，而Device mapper是块级存储，所有的操作都是直接对块进行操作，而不是文件。Device mapper驱动会先在块设备上创建一个资源池，然后在资源池上创建一个带有文件系统的基本设备，所有镜像都是这个基本设备的快照，而容器则是镜像的快照。所以在容器里看到文件系统是资源池上基本设备的文件系统的快照，并没有为容器分配空间。当要写入一个新文件时，在容器的镜像内为其分配新的块并写入数据，这个叫用时分配。当要修改已有文件时，再使用CoW为容器快照分配块空间，将要修改的数据复制到在容器快照中新的块里再进行修改。

OverlayFS是文件级存储，Device mapper是块级存储，当文件特别大而修改的内容很小，Overlay不管修改的内容大小都会复制整个文件，对大文件进行修改显然要比小文件要消耗更多的时间，而块级无论是大文件还是小文件都只复制需要修改的块，并不是整个文件，在这种场景下，显然device mapper要快一些。因为块级的是直接访问逻辑盘，适合IO密集的场景。而对于程序内部复杂，大并发但少IO的场景，Overlay的性能相对要强一些.

3.4 docker registry

启动容器时，docker daemon会试图从本地获取相关的镜像，本地镜像不存在时，其将从Registry中下载该镜像并保存到本地。

Registry用于保存docker镜像，包括镜像的层次结构和元数据。用户可以自建Registry，亦可使用官方的Docker Hub。

3.4.1 docker registry的分类：

• Sponsor Registry：第三方的Registry，供客户和Docker社区使用
• Mirror Registry：第三方的Registry，只让客户使用
• Vendor Registry：由发布docker镜像的供应商提供的registry
• Private Registry：通过设有防火墙和额外的安全层的私有实体提供的registry

3.4.2 docker registry的组成:

• Repository:
  • 由某特定的docker镜像的所有迭代版本组成的镜像仓库
  • 一个Registry中可以存在多个Repository
    • Repository可分为“顶层仓库”和“用户仓库”
    • 用户仓库名称格式为“用户名/仓库名”
  • 每个仓库可包含多个Tag(标签)，每个标签对应一个镜像
• Index
  • 维护用户帐户、镜像的检验以及公共命名空间的信息
  • 相当于为Registry提供了一个完成用户认证等功能的检索接口

Docker Registry中的镜像通常由开发人员制作，而后推送至“公共”或“私有”Registry上保存，供其他人员使用，例如“部署”到生产环境。

4. docker镜像的制作

多数情况下，我们做镜像是基于别人已存在的某个基础镜像来实现的，我们把它称为base image。比如一个纯净版的最小化的centos、ubuntu或debian。

那么这个最小化的centos镜像从何而来呢？其实这个基础镜像一般是由Docker Hub的相关维护人员，也就是Docker官方手动制作的。这个基础镜像的制作对于Docker官方的专业人员来说是非常容易的，但对于终端用户来说就不是那么容易制作的了。

4.1 Docker Hub

Docker Hub是一种基于云的registries服务它允许您链接到代码存储库、构建镜像并测试它们、存储手动推送的镜像以及指向Docker cloud的链接，以便您可以将镜像部署到主机。
它为容器镜像发现、分发和更改管理、用户和团队协作以及整个开发管道中的工作流自动化提供了一个集中化的资源。

Docker Hub提供以下主要功能：

• 镜像存储库
  • 从社区和官方图书馆中查找和提取镜像，以及从您可以访问的私人镜像仓库中管理、推送和提取镜像。
• 自动构建
  • 在对源代码存储库进行更改时自动创建新镜像。
• Webhooks
  • 作为自动构建的一项功能，Webhooks允许您在成功推送到存储库后触发操作。
• Organizations
  • 创建工作组以管理对镜像存储库的访问。
• GitHub and Bitbucket Integration
  • 将Hub和Docker镜像添加到当前工作流中

4.2 docker镜像的获取

要从远程的docker仓库获取docker镜像并将其添加到本地系统，请使用docker pull命令：

// 命令的格式是
# docker pull <registry>[:<port>]/[<namespace>/]<name>:<tag>

在TCP上提供docker分发服务的主机（默认值：5000）
识别由控制的一个特定的镜像，一些registries还支持行级别的修改这些功能属于可选的，但是，当包含它时，提供的附加层次结构级别可用于区分具有相同属性的镜像。

层次结构的附加层次：

命名空间	示例（<命名空间>/<名称>）
组织	redhat/kubernetes, google/kubernetes
登录（用户名）	Alice/application, bob/application
角色	devel/database, test/database, prod/database

5. 镜像的生成

镜像的生成途径：

• Dockerfile
• 基于容器制作
• Docker Hub automated builds

5.1 基于容器制作镜像

从容器的更改创建一个新镜像
用法：

docker commit [OPTIONS] CONTAINER [REPOSITORY[:TAG]]

选项	默认	描述
作者，-a		作者（例如，“John Hannibal Smith hannibal@a-team.com ”）
-c, --更改列表		将 Dockerfile 指令应用于创建的镜像
-m, --message 字符串		提交消息
-p, --暂停	true	Pause container during commit

拉取镜像

[root@localhost ~]# docker pull busybox

//用刚才拉取的镜像运行一个容器
[root@localhost ~]# docker run --name b1 -it busybox  // --name是给容器命名 
/ # mkdir data
/ # echo 'I am web' > data/index.html

在创建镜像时，我们不能关闭容器，必须使其处于运行状态，所以我们必须要另起一个终端，然后执行

[root@localhost ~]# docker commit -p b1
sha256:80c5a0d61e1eab87da654f20a8e093683be96c6f0b2ba643f7914e4f62526942

// 若不指定名字和库名默认是没有的，我们可以使用下面的命令来为其指定
[root@localhost ~]# docker images 
REPOSITORY              TAG       IMAGE ID       CREATED          SIZE
<none>                  <none>    80c5a0d61e1e   29 seconds ago   1.24MB
dockerimages123/nginx   v0.1      21509a896d2a   9 hours ago      634MB
busybox                 latest    d23834f29b38   2 days ago       1.24MB
httpd                   latest    ad17c88403e2   2 weeks ago      143MB
nginx                   1.20.2    aedf7f31bdab   2 weeks ago      141MB
nginx                   latest    ea335eea17ab   2 weeks ago      141MB
hello-world             latest    feb5d9fea6a5   2 months ago     13.3kB
centos                  latest    5d0da3dc9764   2 months ago     231MB

[root@localhost ~]# docker tag 80c5a0d61e1e dockerimages123/b1:v0.1
[root@localhost ~]# docker images 
REPOSITORY              TAG       IMAGE ID       CREATED              SIZE
dockerimages123/b1      v0.1      80c5a0d61e1e   About a minute ago   1.24MB
dockerimages123/nginx   v0.1      21509a896d2a   9 hours ago          634MB

此时要注意的是，我们的仓库名叫b1，所以我们要在Docker Hub上创建一个名为b1的仓库，然后再将我们做好的镜像push上去

//点击create创建仓库

// 首先登录你的docker Hub

[root@localhost ~]# docker login
Login with your Docker ID to push and pull images from Docker Hub. If you don't have a Docker ID, head over to https://hub.docker.com to create one.
Username: dockerimages123   //dockerHub的账号
Password:   //密码
WARNING! Your password will be stored unencrypted in /root/.docker/config.json.
Configure a credential helper to remove this warning. See
https://docs.docker.com/engine/reference/commandline/login/#credentials-store

Login Succeeded

// 上传镜像

[root@localhost ~]# docker push dockerimages123/b1:v0.1 
The push refers to repository [docker.io/dockerimages123/b1]
cbe3e15be8c6: Pushed 
9f2549622fec: Mounted from library/busybox 
v0.1: digest: sha256:e0205941c3b05c14903331ba070a1789b91e462bb8efb35d07fa7ab7f83b93b6 size: 734

有此内容说明上传成功

// 使用新生成的镜像创建容器

[root@localhost ~]# docker run --name b2 -it dockerimages123/b1:v0.1 
/ # ls data/
index.html
/ # cat data/index.html 
I am web

由此可见，新生成的镜像中是包含了新增的内容的，但是此时有一个问题，那就是容器默认要启动的进程是什么？在这里，默认情况下是启动的sh进程，但我们是要启动一个http站点，所以我们要在创建镜像时将容器默认启动的进程设为httpd，这样一来我们就可以通过新生成的镜像来快速构建一个简单的http站点了。

使用docker inspect命令查看b2容器启动的默认进程是什么

[root@localhost ~]# docker inspect b2 
此处省略N行
 ],
            "Cmd": [
                "sh"
            ],

此处省略N行
"GlobalIPv6PrefixLen": 0,
            "IPAddress": "172.17.0.2",
            "IPPrefixLen": 16,
此处省略N行

// 重新生成镜像

// -a是指定作者信息 ，-h是指定家目录就是index.html文件存放的位置，-c是容器启动之后要执行的命令，-p是暂停容器，b1是容器的名字，dockerimages123/b1:v0.2这个是镜像的名字
docker commit -a 'deokcer <1@2>' -c 'CMD ["/bin/httpd","-f","-h","/data"]' -p b1 dockerimages123/b1:v0.2
sha256:f64117fd4033ca0774b73d97907442e83039ec3b0cf5c55d11f5d2dcd11b87ca

[root@localhost ~]# docker images 
REPOSITORY              TAG       IMAGE ID       CREATED          SIZE
dockerimages123/b1      v0.2      f64117fd4033   18 seconds ago   1.24MB
dockerimages123/b1      v0.1      80c5a0d61e1e   51 minutes ago   1.24MB

// 使用新生成的镜像创建容器

[root@localhost ~]# docker run --name b2 -d --name web dockerimages123/b1:v0.2 
9b39fd4ab0f64b00abdada9b462887594466d7d50cc06ad70f71b79bbcf0167b

[root@localhost ~]# docker ps 
CONTAINER ID   IMAGE                     COMMAND                  CREATED             STATUS             PORTS     NAMES
9b39fd4ab0f6   dockerimages123/b1:v0.2   "/bin/httpd -f -h /d…"   23 seconds ago      Up 21 seconds                web
cad21fad3701   dockerimages123/b1:v0.1   "sh"                     17 minutes ago      Up 17 minutes                b2
3a02fed9630c   busybox                   "sh"

使用docker inspect命令查看t2容器启动的默认进程是什么，以及其IP地址，然后用curl命令访问该IP，看是否能访问到网页

[root@localhost ~]# docker inspect web  //查看容器的详细信息，可以查看IP

[root@localhost ~]# curl 172.17.0.4
I am web

6. 镜像的导入与导出

假如有2台主机，我们在主机1上做了一个镜像，主机2想用这个镜像怎么办呢？

我们可以在主机1上push镜像到镜像仓库中，然后在主机2上pull把镜像拉下来使用，这种方式就显得比较麻烦，假如我只是测试用的，在一台主机上做好镜像后在另一台主机上跑一下就行了，没必要推到仓库上然后又把它拉到本地来。

此时我们可以在已有镜像的基础上把镜像打包成一个压缩文件，然后拷贝到另一台主机上将其导入，这就是镜像的导入和导出功能。

docker中我们使用docker save进行导出，使用docker load进行导入。

// 在已生成镜像的主机上执行docker save导出镜像

// 若不指定版本默认会将所有的版本都打包
[root@localhost ~]# docker save -o myimages.gz dockerimages123/b1:v0.2

// 删除正在使用要删除镜像的容器
[root@localhost ~]# docker rm 9b39fd4ab0f6

// 删除容器
[root@localhost ~]# docker rmi -f f64117fd4033
Untagged: dockerimages123/b1:v0.2
Deleted: sha256:f64117fd4033ca0774b73d97907442e83039ec3b0cf5c55d11f5d2dcd11b87ca

在另一台没有镜像的主机上执行docker load导入镜像

[root@localhost ~]# docker load -i myimages.gz 
Loaded image: dockerimages123/b1:v0.2