镜像概念
镜像可以理解为应用程序的集装箱,而docker用来装卸集装箱。
docker镜像含有启动容器所需要的文件系统及其内容,因此,其用于创建并启动容器。
docker镜像采用分层构建机制,最底层为bootfs,其上为rootfs
-
bootfs:用于系统引导的文件系统,包括bootloader和kernel,容器启动完成后会被卸载以节约内存资源
-
rootfs:位于bootfs之上,表现为docker容器的根文件系统
-
传统模式中,系统启动之时,内核挂载rootfs会首先将其挂载为“只读”模式,完整性自检完成后将其重新挂载为读写模式
-
docker中,rootfs由内核挂载为“只读”模式,而后通过“联合挂载”技术额外挂载一个“可写”层
注意:当删除容器时,这个容器自有的“可写”层会一起被删除
Docker镜像层
位于下层的镜像称为父镜像(parrent image),最底层的称为基础镜像(base image);
最上层为“可读写”层,其下的均为“只读”层。
Docker存储驱动
docker提供了多种存储驱动来实现不同的方式存储镜像,下面是常用的几种存储驱动:
- AUFS
- OverlayFS #目前最常用
- Devicemapper
- Btrfs
- VFS
AUFS
AUFS(AnotherUnionFS)是一种Union FS,是文件级的存储驱动。AUFS是一个能透明覆盖一个或多个现有文件系统的层状文件系统,把多层合并成文件系统的单层表示。简单来说就是支持将不同目录挂载到同一个虚拟文件系统下的文件系统。这种文件系统可以一层一层地叠加修改文件。无论底下有多少层都是只读的,只有最上层的文件系统是可写的。当需要修改一个文件时,AUFS创建该文件的一个副本,使用CoW将文件从只读层复制到可写层进行修改,结果也保存在可写层。在Docker中,底下的只读层就是image,可写层就是Container。
AUFS文件系统据说有3W行代码,而ext4文件系统却只有4000-5000行左右代码,这些代码是要被整合进内核的,后来AUFS申请要被合并进内核代码的时候,linuz觉得它这代码太过臃肿,于是拒绝了。因此AUFS这个文件系统一直以来就不是linux内核中自有的文件系统,想用AUFS这个文件系统的话,必须自己向内核打补丁并去编译使用它,但redhat系列的操作系统一向以稳定著称,不会干这种出格的事,所以在redhat系列操作系统中使用AUFS并无可能。而ubuntu上的docker默认使用的就是AUFS。
OverlayFS
Device mapper是Linux内核2.6.9后支持的,提供的一种从逻辑设备到物理设备的映射框架机制,在该机制下,用户可以很方便的根据自己的需要制定实现存储资源的管理策略。AUFS和OverlayFS都是文件级存储,而Device mapper是块级存储,所有的操作都是直接对块进行操作,而不是文件。Device mapper驱动会先在块设备上创建一个资源池,然后在资源池上创建一个带有文件系统的基本设备,所有镜像都是这个基本设备的快照,而容器则是镜像的快照。所以在容器里看到文件系统是资源池上基本设备的文件系统的快照,并没有为容器分配空间。当要写入一个新文件时,在容器的镜像内为其分配新的块并写入数据,这个叫用时分配。当要修改已有文件时,再使用CoW为容器快照分配块空间,将要修改的数据复制到在容器快照中新的块里再进行修改。
OverlayFS是文件级存储,Device mapper是块级存储,当文件特别大而修改的内容很小,Overlay不管修改的内容大小都会复制整个文件,对大文件进行修改显然要比小文件要消耗更多的时间,而块级无论是大文件还是小文件都只复制需要修改的块,并不是整个文件,在这种场景下,显然device mapper要快一些。因为块级的是直接访问逻辑盘,适合IO密集的场景。而对于程序内部复杂,大并发但少IO的场景,Overlay的性能相对要强一些。
docker registry
启动容器时,docker daemon会试图从本地获取相关的镜像,本地镜像不存在时,其将从Registry中下载该镜像并保存到本地。
Registry用于保存docker镜像,包括镜像的层次结构和元数据。用户可以自建Registry,亦可使用官方的Docker Hub。
docker registry的分类:
- Sponsor Registry:第三方的Registry,供客户和Docker社区使用
- Mirror Registry:第三方的Registry,只让客户使用
- Vendor Registry:由发布docker镜像的供应商提供的registry
- Private Registry:通过设有防火墙和额外的安全层的私有实体提供的registry
docker registry的组成:
-
Repository
- 由某特定的docker镜像的所有迭代版本组成的镜像仓库
- 一个Registry中可以存在多个Repository
- Repository可分为“顶层仓库”和“用户仓库”
- 用户仓库名称格式为“用户名/仓库名”
-
Index
- 维护用户帐户、镜像的检验以及公共命名空间的信息
- 相当于为Registry提供了一个完成用户认证等功能的检索接口
Docker Registry中的镜像通常由开发人员制作,而后推送至“公共”或“私有”Registry上保存,供其他人员使用,例如“部署”到生产环境。
docker镜像的制作
多数情况下,我们做镜像是基于别人已存在的某个基础镜像来实现的,我们把它称为base image。比如一个纯净版的最小化的centos、ubuntu或debian。
那么这个最小化的centos镜像从何而来呢?其实这个基础镜像一般是由Docker Hub的相关维护人员,也就是Docker官方手动制作的。这个基础镜像的制作对于Docker官方的专业人员来说是非常容易的,但对于终端用户来说就不是那么容易制作的了。
创建源码编译nginx镜像
1、从官网网站拉取一个centos作为基础镜像
[root@localhost ~]# docker pull centos
Using default tag: latest
latest: Pulling from library/centos
a1d0c7532777: Pull complete
Digest: sha256:a27fd8080b517143cbbbab9dfb7c8571c40d67d534bbdee55bd6c473f432b177
Status: Downloaded newer image for centos:latest
docker.io/library/centos:latest
[root@localhost ~]# docker images
REPOSITORY TAG IMAGE ID CREATED SIZE
busybox latest d23834f29b38 2 days ago 1.24MB
httpd latest ad17c88403e2 13 days ago 143MB
nginx latest ea335eea17ab 2 weeks ago 141MB
centos latest 5d0da3dc9764 2 months ago 231MB
//后台交互方式运行centos
[root@localhost ~]# docker run -dit centos /bin/bash
[root@localhost ~]# docker ps -a
CONTAINER ID IMAGE COMMAND CREATED STATUS PORTS NAMES
f362f392badb centos "/bin/bash" 2 minutes ago Up 2 minutes lucid_lewin
2、进入容器编译安装nginx
[root@localhost ~]# docker exec -it f362f392badb /bin/bash
[root@f362f392badb /]# useradd -r -M -s /sbin/nologin nginx
[root@f362f392badb /]# id nginx
uid=998(nginx) gid=996(nginx) groups=996(nginx)
[root@f362f392badb /]# yum -y install pcre-devel openssl openssl-devel gd-devel gcc gcc-c++ make vim
[root@f362f392badb /]# yum -y groups mark install 'Development Tools'
[root@f362f392badb /]# mkdir -p /var/log/nginx
[root@f362f392badb /]# chown -R nginx.nginx /var/log/nginx
[root@f362f392badb /]# cd /usr/src/
[root@f362f392badb src]# yum -y install wget
//下载nginx源码包
[root@f362f392badb src]# wget http://nginx.org/download/nginx-1.12.1.tar.gz
--2021-12-02 10:25:56-- http://nginx.org/download/nginx-1.12.1.tar.gz
Resolving nginx.org (nginx.org)... 52.58.199.22, 3.125.197.172, 2a05:d014:edb:5704::6, ...
Connecting to nginx.org (nginx.org)|52.58.199.22|:80... connected.
HTTP request sent, awaiting response... 200 OK
Length: 981093 (958K) [application/octet-stream]
Saving to: ‘nginx-1.12.1.tar.gz’
nginx-1.12.1.tar 100%[==========>] 958.10K 294KB/s in 3.3s
2021-12-02 10:26:00 (294 KB/s) - ‘nginx-1.12.1.tar.gz’ saved [981093/981093]
[root@f362f392badb src]# ls
debug kernels nginx-1.12.1.tar.gz
[root@f362f392badb src]# tar xf nginx-1.12.1.tar.gz
[root@f362f392badb src]# cd nginx-1.12.1
[root@f362f392badb src]# ./configure --prefix=/usr/local/nginx --user=nginx --group=nginx --with-debug --with-http_ssl_module --with-http_realip_module --with-http_image_filter_module --with-http_gunzip_module --with-http_gzip_static_module --with-http_stub_status_module --http-log-path=/var/log/nginx/access.log --error-log-path=/var/log/nginx/error.log
[root@f362f392badb nginx-1.12.1]# make && make install
//配置环境变量
[root@localhost ~]# echo 'export PATH=/usr/local/nginx/sbin:$PATH' > /etc/profile.d/nginx.sh
[root@localhost ~]# . /etc/profile.d/nginx.sh
[root@f362f392badb nginx]# nginx
[root@f362f392badb nginx]# ss -antl //此时容器已经在运行
State Recv-Q Send-Q Local Address:Port Peer Address:Port Process
LISTEN 0 128 0.0.0.0:80 0.0.0.0:*
//把现在的nginx打包成镜像
[root@localhost ~]# docker commit -p f362f392badb
#生成镜像时不指定名称
sha256:ed87ed4bff8a42b4ee23bfed44cac8158dd58ce3ff6aa80b73e4a3d5dd70921c
[root@localhost ~]# docker images
REPOSITORY TAG IMAGE ID CREATED SIZE
<none> <none> ed87ed4bff8a 18 seconds ago 572MB
busybox latest d23834f29b38 2 days ago 1.24MB
//跟改成可以上传自己镜像厂库的名称
[root@localhost ~]# docker tag ed87ed4bff8a wjm1734321/nginx:v0.1
#tag跟改镜像的名称
[root@localhost ~]# docker images
REPOSITORY TAG IMAGE ID CREATED SIZE
wjm1734321/nginx v0.1 ed87ed4bff8a 20 minutes ago 572MB
busybox latest d23834f29b38 2 days ago 1.24MB
//生成新的镜像
[root@localhost ~]# docker commit -p -a 'wjm 1@2.com' -c 'CMD ["/export/server/nginx/sbin/nginx","-g","daemon off;"]' naughty_jackson wjm1734321/nginx:v0.4
#-p暂停容器再创建 -a指定镜像的信息 -c容器运行起来后要执行的任务
#naughty_jackson 随机生成的主机名 wjm1734321/nginx:v0.4要生成的镜像名称
[root@localhost ~]# docker images
REPOSITORY TAG IMAGE ID CREATED SIZE
wjm1734321/nginx v0.4 3a7536f0abf7 12 seconds ago 572MB
wjm1734321/nginx v0.3 2a3bd6e7fb28 23 minutes ago 572MB
wjm1734321/nginx v0.2 1acbfeda222f 42 minutes ago 572MB
wjm1734321/nginx v0.1 ed87ed4bff8a 15 hours ago 572MB
wang1734321/nginx v0.1 ed87ed4bff8a 15 hours ago 572MB
busybox latest d23834f29b38 2 days ago 1.24MB
httpd latest ad17c88403e2 2 weeks ago 143MB
nginx latest ea335eea17ab 2 weeks ago 141MB
centos latest 5d0da3dc9764 2 months ago 231MB
//启动容器并且配置端口映射 这样就可以用本机的ip地址访问nginx服务
[root@localhost ~]# docker run -d --name nginx01 -p80:80 wjm1734321/nginx:v0.4
5b66dd7a900b40124578334a9ac28a213227a795193fde29a8ced3dd2e33bbc3
[root@localhost ~]# docker ps -a
CONTAINER ID IMAGE COMMAND CREATED STATUS PORTS NAMES
5b66dd7a900b wjm1734321/nginx:v0.4 "/export/server/ngin…" 5 seconds ago Up 4 seconds 0.0.0.0:80->80/tcp, :::80->80/tcp nginx01
[root@localhost ~]# docker inspect eef7db2b3499
......
"Gateway": "172.17.0.1",
"IPAddress": "172.17.0.3",
......
......
[root@localhost ~]# curl 172.17.0.3
<!DOCTYPE html>
<html>
<head>
<title>Welcome to nginx!</title>
<style>
body {
width: 35em;
margin: 0 auto;
font-family: Tahoma, Verdana, Arial, sans-serif;
}
##此时就可以可以看见nginx页面内容表示可以正常开启容器服务自动运行
##此时就可以可以看见nginx页面内容表示可以正常开启容器服务自动运行
//登陆到自己的镜像仓库上传镜像
[root@localhost ~]# docker login
Login with your Docker ID to push and pull images from Docker Hub. If you don't have a Docker ID, head over to https://hub.docker.com to create one.
Username: wjm1734321
Password:
WARNING! Your password will be stored unencrypted in /root/.docker/config.json.
Configure a credential helper to remove this warning. See
https://docs.docker.com/engine/reference/commandline/login/#credentials-store
Login Succeeded
## 上传镜像
```bash
[root@localhost ~]# docker push wjm1734321/nginx:v0.4
The push refers to repository [docker.io/wjm1734321/nginx]
c3b4c1ee1050: Pushed
0abde9e07443: Pushed
63d2c2042dd4: Layer already exists
74ddd0ec08fa: Layer already exists
v0.4: digest: sha256:87a686140fc2efb252ff4b386527012992707fdb9adc6d608edc7073703d1624 size: 1157