docker基础
1 . docker的概述
docker中的容器:
- lxc --> libcontainer --> runC
2 . OCI&OCF
OCI
Open Container-initiative
由Linux基金会主导于2015年6月创立
旨在围绕容器格式和运行时制定一个开放的工业化标准
contains two specifications
the Runtime Specification(runtime-spec)
the Image Specification(image-spec)
OCF
Open Container Format
runC is a CLI tool for spawning and running containers according to the OCI specification
Containers are started as a child process of runC and can be embedded into various other systems without having to run a daemon
runC is built on libcontainer, the same container technology powering millions of Docker Engine installations
docker提供了一个专门容纳容器镜像的站点:https://hub.docker.com/
3 . docker架构
4 . docker镜像与镜像仓库
为什么镜像仓库名字是Registry而不是repository?在docker中仓库的名字是以应用的名称取名的。
镜像是静态的,而容器是动态的,容器有其生命周期,镜像与容器的关系类似于程序与进程的关系。镜像类似于文件系统中的程序文件,而容器则类似于将一个程序运行起来的状态,也即进程。所以容器是可以删除的,容器被删除后其镜像是不会被删除的。
5 . docker对象
When you use docker, you are creating and using images, containers, networks, volumes, pluginns, and other objects.
- IMAGES
- An image is a read-only template with instructions for creating a docker container.
- Often, an image is based on another image, with some additional customization.
- You might create your own images or you might only use those created by others and published in a registry.
6 . 安装及使用docker
#docker安装
[root@node01-linux ~]# cd /etc/yum.repos.d/
[root@node01-linux yum.repos.d]# curl -o docker-ce.repo https://mirrors.tuna.tsinghua.edu.cn/docker-ce/linux/centos/docker-ce.repo
[root@node01-linux yum.repos.d]# sed -i 's@https://download.docker.com@https://mirrors.tuna.tsinghua.edu.cn/docker-ce@g' docker-ce.repo
[root@node01-linux ~]# curl -o /etc/yum.repos.d/CentOS-Base.repo https://mirrors.aliyun.com/repo/Centos-7.repo
[root@node01-linux ~]# sed -i -e '/mirrors.cloud.aliyuncs.com/d' -e '/mirrors.aliyuncs.com/d' /etc/yum.repos.d/CentOS-Base.repo
[root@node01-linux ~]# sed -i 's/$releasever/7/g' /etc/yum.repos.d/CentOS-Base.repo
[root@node01-linux ~]# curl -o /etc/yum.repos.d/epel.repo http://mirrors.aliyun.com/repo/epel-7.repo
[root@node01-linux ~]# yum clean all //清理缓存
[root@node01-linux ~]# yum makecache //建立缓存
[root@node01-linux ~]# yum -y install docker-ce
6 . 1 docker加速
docker-ce的配置文件是/etc/docker/daemon.json,此文件默认不存在,需要我们手动创建并进行配置,而docker的加速就是通过配置此文件来实现的。
docker的加速方式:
- docker cn
- 中国科技大学加速器
- 阿里云加速器(需要通过阿里云开发者平台注册帐号,免费使用个人私有的加速器)
[root@node01-linux ~]# systemctl enable --now docker.service
[root@node01-linux ~]# cat > /etc/docker/daemon.json <<EOF
{
"registry-mirrors": ["https://hhhnige7.mirror.aliyuncs.com"]
}
EOF
[root@node01-linux ~]# systemctl daemon-reload
[root@node01-linux ~]# systemctl restart docker //重启
[root@node01-linux ~]# docker version //查看版本等信息
[root@node01-linux ~]# docker info //查看加速器等信息
6 . 2 docker常用操作
命令 | 功能 |
---|---|
docker search | Search the Docker Hub for images |
docker pull | Pull an image or a repository from a registry |
docker images | List images |
docker create | Create a new conntainer |
docker start | Start one or more stopped containers |
docker run | Run a command in a new container |
docker attach | Attach to a runninng container |
docker ps | List containers |
docker logs | Fetch the logs of a container |
docker restart | Restart a container |
docker stop | Stop one or more running containers |
docker kill | Kill one or more running containers |
docker rm | Remove onne or more containers |
docker exec | Run a command in a running container |
docker info | Display system-wide information |
docker inspect | Return low-level information on Docker objects |
#在Docker Hub上查找镜像
[root@node01-linux ~]# docker search nginx
NAME DESCRIPTION STARS OFFICIAL AUTOMATED
nginx Official build of Nginx. 13666 [OK]
jwilder/nginx-proxy Automated Nginx reverse proxy for docker con… 1866 [OK]
richarvey/nginx-php-fpm Container running Nginx + PHP-FPM capable of… 782 [OK]
#拉httpd的镜像
[root@node01-linux ~]# docker pull httpd
Using default tag: latest
latest: Pulling from library/httpd
bf5952930446: Pull complete
3d3fecf6569b: Pull complete
b5fc3125d912: Pull complete
679d69c01e90: Pull complete
76291586768e: Pull complete
Digest: sha256:3cbdff4bc16681541885ccf1524a532afa28d2a6578ab7c2d5154a7abc182379
Status: Downloaded newer image for httpd:latest
docker.io/library/httpd:latest
#镜像列表
[root@node01-linux ~]# docker images
REPOSITORY TAG IMAGE ID CREATED SIZE
httpd latest a6ea92c35c43 3 weeks ago 166MB
#创建一个容器
[root@node01-linux ~]# docker create httpd
c603ec24bfafdcb3826e34c9f91346284fbbf444b1b4d19ab4f62f0f060d2fc0
#启动一个容器
[root@node01-linux ~]# docker start c603ec24bfaf
c603ec24bfaf
#列出所有容器(包括运行停止的)
[root@node01-linux ~]# docker ps -a
CONTAINER ID IMAGE COMMAND CREATED STATUS PORTS NAMES
c603ec24bfaf httpd "httpd-foreground" 4 minutes ago Up 9 seconds 80/tcp cranky_williams
#运行一个程序在后台运行,没有镜像的话就会去Docker Hub拉
[root@node01-linux ~]# docker run -d nginx
Unable to find image 'nginx:latest' locally
latest: Pulling from library/nginx
bf5952930446: Already exists
cb9a6de05e5a: Pull complete
9513ea0afb93: Pull complete
b49ea07d2e93: Pull complete
a5e4a503d449: Pull complete
Digest: sha256:b0ad43f7ee5edbc0effbc14645ae7055e21bc1973aee5150745632a24a752661
Status: Downloaded newer image for nginx:latest
5fde274151cdccbc4614ccb6d7e970bba38078a0359d835a32334ef2f4dec720
#在运行的容器中运行命令
[root@node01-linux ~]# docker exec -it c603ec24bfaf /bin/bash
root@c603ec24bfaf:/usr/local/apache2# exit
exit
#查看容器运行的日志
[root@node01-linux ~]# docker logs c603ec24bfaf
AH00558: httpd: Could not reliably determine the server's fully qualified domain name, using 172.17.0.2. Set the 'ServerName' directive globally to suppress this message
AH00558: httpd: Could not reliably determine the server's fully qualified domain name, using 172.17.0.2. Set the 'ServerName' directive globally to suppress this message
[Fri Aug 28 02:54:13.911509 2020] [mpm_event:notice] [pid 1:tid 139746767578240] AH00489: Apache/2.4.46 (Unix) configured -- resuming normal operations
[Fri Aug 28 02:54:13.911803 2020] [core:notice] [pid 1:tid 139746767578240] AH00094: Command line: 'httpd -D FOREGROUND'
#重启一个容器
[root@node01-linux ~]# docker ps -a
CONTAINER ID IMAGE COMMAND CREATED STATUS PORTS NAMES
5fde274151cd nginx "/docker-entrypoint.…" 19 minutes ago Exited (0) 15 minutes ago vigorous_shamir
c603ec24bfaf httpd "httpd-foreground" 32 minutes ago Up 28 minutes 80/tcp cranky_williams
[root@node01-linux ~]# docker restart 5fde274151cd
5fde274151cd
[root@node01-linux ~]# docker ps
CONTAINER ID IMAGE COMMAND CREATED STATUS PORTS NAMES
5fde274151cd nginx "/docker-entrypoint.…" 19 minutes ago Up 4 seconds 80/tcp vigorous_shamir
c603ec24bfaf httpd "httpd-foreground" 32 minutes ago Up 28 minutes 80/tcp cranky_williams
#停止一个容器
[root@node01-linux ~]# docker stop 5fde274151cd
5fde274151cd
[root@node01-linux ~]# docker ps
CONTAINER ID IMAGE COMMAND CREATED STATUS PORTS NAMES
c603ec24bfaf httpd "httpd-foreground" 34 minutes ago Up 30 minutes 80/tcp cranky_williams
#强制杀掉一个容器
[root@node01-linux ~]# docker kill c603ec24bfaf
c603ec24bfaf
[root@node01-linux ~]# docker ps
CONTAINER ID IMAGE COMMAND CREATED STATUS PORTS NAMES
# 删掉一个容器
[root@node01-linux ~]# docker ps -a
CONTAINER ID IMAGE COMMAND CREATED STATUS PORTS NAMES
5fde274151cd nginx "/docker-entrypoint.…" 26 minutes ago Exited (0) 5 seconds ago vigorous_shamir
c603ec24bfaf httpd "httpd-foreground" 39 minutes ago Up 45 seconds 80/tcp cranky_williams
#只能删掉一个停止的
[root@node01-linux ~]# docker rm 5fde274151cd
5fde274151cd
[root@node01-linux ~]# docker ps -a
CONTAINER ID IMAGE COMMAND CREATED STATUS PORTS NAMES
c603ec24bfaf httpd "httpd-foreground" 40 minutes ago Up About a minute 80/tcp cranky_williams
# 能删掉一个运行的
[root@node01-linux ~]# docker ps
CONTAINER ID IMAGE COMMAND CREATED STATUS PORTS NAMES
c603ec24bfaf httpd "httpd-foreground" 41 minutes ago Up 2 minutes 80/tcp cranky_williams
[root@node01-linux ~]# docker rm -f c603ec24bfaf
c603ec24bfaf
[root@node01-linux ~]# docker ps
CONTAINER ID IMAGE COMMAND CREATED STATUS PORTS NAMES
#在一个正在运行的容器中运行Docker objectsnd的commaReturn低级信息
[root@node01-linux ~]# docker inspect 85f03ae85422
#删除所有的容器
[root@node01-linux ~]# docker ps -a
CONTAINER ID IMAGE COMMAND CREATED STATUS PORTS NAMES
1e28db6444b1 zcqb/b1:v0.1 "sh" About an hour ago Exited (0) 58 minutes ago t1
581164d6ea6f busybox "sh" 10 hours ago Exited (0) 10 hours ago b1
[root@node01-linux ~]# docker rm -f $(docker ps -qa)
1e28db6444b1
581164d6ea6f
[root@node01-linux ~]# docker ps -a
CONTAINER ID IMAGE COMMAND CREATED STATUS PORTS NAMES
docker event state
7 . docker镜像管理
镜像的概念
镜像可以理解为应用程序的集装箱,而docker用来装卸集装箱。
docker镜像含有启动容器所需要的文件系统及其内容,因此,其用于创建并启动容器。
docker镜像采用分层构建机制,最底层为bootfs,其上为rootfs
- bootfs:用于系统引导的文件系统,包括bootloader和kernel,容器启动完成后会被卸载以节约内存资源
- rootfs:位于bootfs之上,表现为docker容器的根文件系统
- 传统模式中,系统启动之时,内核挂载rootfs会首先将其挂载为“只读”模式,完整性自检完成后将其重新挂载为读写模式
- docker中,rootfs由内核挂载为“只读”模式,而后通过“联合挂载”技术额外挂载一个“可写”层
注意:当删除容器时,这个容器自有的“可写”层会一起被删除
docker镜像层
位于下层的镜像称为父镜像(parrent image),最底层的称为基础镜像(base image);
最上层为“可读写”层,其下的均为“只读”层。
docker存储驱动
docker提供了多种存储驱动来实现不同的方式存储镜像,下面是常用的几种存储驱动:
- DeviceMapper
- OverlayFS
- Devicemapper
- Btrfs
- VFS
DeviceMapper
AUFS(AnotherUnionFS)是一种Union FS,是文件级的存储驱动。AUFS是一个能透明覆盖一个或多个现有文件系统的层状文件系统,把多层合并成文件系统的单层表示。简单来说就是支持将不同目录挂载到同一个虚拟文件系统下的文件系统。这种文件系统可以一层一层地叠加修改文件。无论底下有多少层都是只读的,只有最上层的文件系统是可写的。当需要修改一个文件时,AUFS创建该文件的一个副本,使用CoW将文件从只读层复制到可写层进行修改,结果也保存在可写层。在Docker中,底下的只读层就是image,可写层就是Container。
AUFS文件系统据说有3W行代码,而ext4文件系统却只有4000-5000行左右代码,这些代码是要被整合进内核的,后来AUFS申请要被合并进内核代码的时候,linuz觉得它这代码太过臃肿,于是拒绝了。因此AUFS这个文件系统一直以来就不是linux内核中自有的文件系统,想用AUFS这个文件系统的话,必须自己向内核打补丁并去编译使用它,但redhat系列的操作系统一向以稳定著称,不会干这种出格的事,所以在redhat系列操作系统中使用AUFS并无可能。而ubuntu上的docker默认使用的就是AUFS。
OverlayFS
Overlay是Linux内核3.18后支持的,也是一种Union FS,和AUFS的多层不同的是Overlay只有两层:一个upper文件系统和一个lower文件系统,分别代表Docker的镜像层和容器层。当需要修改一个文件时,使用CoW将文件从只读的lower复制到可写的upper进行修改,结果也保存在upper层。在Docker中,底下的只读层就是image,可写层就是Container。目前最新的OverlayFS为Overlay2。
AUFS和Overlay都是联合文件系统,但AUFS有多层,而Overlay只有两层,所以在做写时复制操作时,如果文件比较大且存在比较低的层,则AUSF会慢一些。而且Overlay并入了linux kernel mainline,AUFS没有。目前AUFS已基本被淘汰。
DeviceMapper
Device mapper是Linux内核2.6.9后支持的,提供的一种从逻辑设备到物理设备的映射框架机制,在该机制下,用户可以很方便的根据自己的需要制定实现存储资源的管理策略。AUFS和OverlayFS都是文件级存储,而Device mapper是块级存储,所有的操作都是直接对块进行操作,而不是文件。Device mapper驱动会先在块设备上创建一个资源池,然后在资源池上创建一个带有文件系统的基本设备,所有镜像都是这个基本设备的快照,而容器则是镜像的快照。所以在容器里看到文件系统是资源池上基本设备的文件系统的快照,并没有为容器分配空间。当要写入一个新文件时,在容器的镜像内为其分配新的块并写入数据,这个叫用时分配。当要修改已有文件时,再使用CoW为容器快照分配块空间,将要修改的数据复制到在容器快照中新的块里再进行修改。
OverlayFS是文件级存储,Device mapper是块级存储,当文件特别大而修改的内容很小,Overlay不管修改的内容大小都会复制整个文件,对大文件进行修改显然要比小文件要消耗更多的时间,而块级无论是大文件还是小文件都只复制需要修改的块,并不是整个文件,在这种场景下,显然device mapper要快一些。因为块级的是直接访问逻辑盘,适合IO密集的场景。而对于程序内部复杂,大并发但少IO的场景,Overlay的性能相对要强一些。
docker registry
启动容器时,docker daemon会试图从本地获取相关的镜像,本地镜像不存在时,其将从Registry中下载该镜像并保存到本地。
Registry用于保存docker镜像,包括镜像的层次结构和元数据。用户可以自建Registry,亦可使用官方的Docker Hub。
docker registry的分类:
- Sponsor Registry:第三方的Registry,供客户和Docker社区使用
- Mirror Registry:第三方的Registry,只让客户使用
- Vendor Registry:由发布docker镜像的供应商提供的registry
- Private Registry:通过设有防火墙和额外的安全层的私有实体提供的registry
docker registry的组成:
- Repository
- 由某特定的docker镜像的所有迭代版本组成的镜像仓库
- 一个Registry中可以存在多个Repository
- Repository可分为“顶层仓库”和“用户仓库”
- 用户仓库名称格式为“用户名/仓库名”
- 每个仓库可包含多个Tag(标签),每个标签对应一个镜像
- Index
- 维护用户帐户、镜像的检验以及公共命名空间的信息
- 相当于为Registry提供了一个完成用户认证等功能的检索接口
Docker Registry中的镜像通常由开发人员制作,而后推送至“公共”或“私有”Registry上保存,供其他人员使用,例如“部署”到生产环境。
docker镜像的制作
多数情况下,我们做镜像是基于别人已存在的某个基础镜像来实现的,我们把它称为base image。比如一个纯净版的最小化的centos、ubuntu或debian。
那么这个最小化的centos镜像从何而来呢?其实这个基础镜像一般是由Docker Hub的相关维护人员,也就是Docker官方手动制作的。这个基础镜像的制作对于Docker官方的专业人员来说是非常容易的,但对于终端用户来说就不是那么容易制作的了。
docker镜像的获取
# docker pull <registry>[:<port>]/[<namespace>/]<name>:<tag>
镜像的生成
镜像的生成途径:
- Dockerfile
- 基于容器制作
- Docker Hub automated builds
Usage:
docker commit [OPTIONS] CONTAINER [REPOSITORY[:TAG]]
Options | Default | Description |
---|---|---|
—author, -a | Author | |
-c, --change list | Apply Dockerfile instruction to the created image | |
-m, --message string | Commit message | |
-p, --pause | true | Pause container during commit |
[root@node01-linux ~]# docker pull busybox
Using default tag: latest
latest: Pulling from library/busybox
61c5ed1cbdf8: Pull complete
Digest: sha256:4f47c01fa91355af2865ac10fef5bf6ec9c7f42ad2321377c21e844427972977
Status: Downloaded newer image for busybox:latest
docker.io/library/busybox:latest
[root@node01-linux ~]# docker run --name b1 -it busybox
/ # ls
bin dev etc home proc root sys tmp usr var
/ # mkdir data
/ # echo 'Busybox test' > data/index.html
/ # cat data/index.html
Busybox test
在创建镜像时,我们不能关闭容器,必须使其处于运行状态,所以我们必须要另起一个终端,然后执行
[root@node01-linux ~]# docker commit -p b1
sha256:2e1c0a663ab08f8a7aee0a6d445b9578f6b151a43d6829e3ade417f0e36c216f
[root@node01-linux ~]# docker images
REPOSITORY TAG IMAGE ID CREATED SIZE
<none> <none> 2e1c0a663ab0 15 seconds ago 1.22MB
nginx latest 4bb46517cac3 2 weeks ago 133MB
httpd latest a6ea92c35c43 3 weeks ago 166MB
busybox latest 018c9d7b792b 4 weeks ago 1.22MB
[root@node01-linux ~]# docker tag 2e1c0a663ab0 zcqb/b1:v0.1
[root@node01-linux ~]# docker images
REPOSITORY TAG IMAGE ID CREATED SIZE
zcqb/b1 v0.1 2e1c0a663ab0 9 minutes ago 1.22MB
nginx latest 4bb46517cac3 2 weeks ago 133MB
httpd latest a6ea92c35c43 3 weeks ago 166MB
busybox latest 018c9d7b792b 4 weeks ago 1.22MB
此时要注意的是,我们的仓库名叫b1,所以我们要在Docker Hub上创建一个名为b1的仓库,然后再将我们做好的镜像push上去
[root@node01-linux ~]# docker login
Login with your Docker ID to push and pull images from Docker Hub. If you don't have a Docker ID, head over to https://hub.docker.com to create one.
Username: zcqb
Password:
WARNING! Your password will be stored unencrypted in /root/.docker/config.json.
Configure a credential helper to remove this warning. See
https://docs.docker.com/engine/reference/commandline/login/#credentials-store
Login Succeeded
[root@node01-linux ~]# docker push zcqb/b1:v0.1
The push refers to repository [docker.io/zcqb/b1]
f2ac098fd982: Layer already exists
514c3a3e64d4: Layer already exists
v0.1: digest: sha256:72854a73a8360d316d0151556e65dd040126a0ea1fe74498413b6eed319196f0 size: 734
使用新生成的镜像创建容器
[root@node01-linux ~]# docker run --name t1 -it zcqb/b1:v0.1
/ # ls
bin data dev etc home proc root sys tmp usr var
/ # ls data/
index.html
/ # cat data/index.html
Busybox test
由此可见,新生成的镜像中是包含了新增的内容的,但是此时有一个问题,那就是容器默认要启动的进程是什么?在这里,默认情况下是启动的sh进程,但我们是要启动一个http站点,所以我们要在创建镜像时将容器默认启动的进程设为httpd,这样一来我们就可以通过新生成的镜像来快速构建一个简单的http站点了。
使用docker inspect
命令查看b1容器启动的默认进程是什么
[root@node01-linux ~]# docker inspect b1
[
...此处省略N行
],
"Cmd": [
"sh"
],
...此处省略N行
]
重新生成镜像并上传
[root@node01-linux ~]# docker commit -c 'CMD ["/bin/httpd","-f","-h","/data"]' -p b1 zcqb/b1:v0.2
[root@node01-linux ~]# docker push zcqb/b1
使用新生成的镜像创建容器
[root@node01-linux ~]# docker inspect t2
[
...
"Cmd": [
"/bin/httpd",
"-f",
"-h",
"/data"
],
...
]
镜像的导入与导出
假如有2台主机,我们在主机1上做了一个镜像,主机2想用这个镜像怎么办呢?
我们可以在主机1上push镜像到镜像仓库中,然后在主机2上pull把镜像拉下来使用,这种方式就显得比较麻烦,假如我只是测试用的,在一台主机上做好镜像后在另一台主机上跑一下就行了,没必要推到仓库上然后又把它拉到本地来。
此时我们可以在已有镜像的基础上把镜像打包成一个压缩文件,然后拷贝到另一台主机上将其导入,这就是镜像的导入和导出功能。
docker中我们使用docker save进行导出,使用docker load进行导入。
在已生成镜像的主机上执行docker save导出镜像
docker save -o myimages.gz seancheng1002/b1
在另一台没有镜像的主机上执行docker load导入镜像
docker load -i myimages.gz