cow机制(copy write 写时复制)
docker镜像由多个只读层叠加而成,启动容器时,docker会加载只读镜像层并在镜像栈顶部添加一个读写层
如果运行中的容器修改了现有的一个已存在的文件,那么该文件将会从读写层下面的只读层复制到读写层,该文件的只读版本依然存在,只是已经被读写层中该文件的副本所隐藏,这就是cow(写时复制)机制
Layer0和1是只读层,Layer2读写层。A(add)添加,D(delete)删除——不是真的删除了,而是隐藏了。
这种方式——访问一个文件,修改和删除等一类的操作,效率会非常低,因为隔着很多层镜像
如果需要绕过这种限制,我们可以通过使用存储卷的机制来实现(数据会在系统上放着)
什么是存储卷
存储卷就是将宿主机的本地文件系统中存在的某个目录直接与容器内部的文件系统上的某一目录建立绑定关系。当我们在容器中的这个目录下写下数据时,容器会将其内容直接写入到宿主机上与此容器建立了绑定关系的目录。
/data/web真机上,/containers/data/web容器上。如果/data/web跟两个容器绑定了,那么这个两个容器就可以实现数据共享
存储卷:在宿主机上的这个与容器形成绑定关系的目录
使用存储卷的好处
1、数据存储在存储卷中,如果容器关闭和被删除时,只要与此容器绑定在宿主机上的存储目录还在,就不用担心数据丢失。可以实现数据持久,脱离容器的生命周期而持久。
2、这种方式管理容器,容器可以脱离主机的限制,在任意一台部署了docker的主机上跑容器,而其数据则可以放在一个共享存储文件系统上,例如:nfs
3、docker的存储卷默认情况下是使用其所在的宿主机上的本地文件系统目录的,宿主机上有属于自己的一块硬盘,这个硬盘没有共享给其他docker主机,而在这台主机上启动的容器所使用的存储卷是关联到此宿主硬盘的某个目录上。这代表当容器在这台主机上停止运行或被删除了再重建,只要关联到硬盘的这个目录下,那么数据还存在。(如果在另一台主机上启动一个新容器,数据不存在,那么就需要在创建容器时手动将容器的数据挂载到一台nfs服务器上,这样就会有数据了。)
用存储卷的原因
关闭并重启容器,数据不会收到影响。但是删除了docker容器,则其里面的更改就会全部丢失。
docker存在着问题:
- 存储于联合挂载文件系统中,不易于宿主机访问
- 容器间数据共享不便
- 删除容器其数据会丢失
解决这些问题就需要存储卷
存储卷管理方式
存储卷在容器初始化时被自动创建,由base image提供的卷中的数据会在此期间完成复制
Volume的初衷是独立于容器的生命周期实现数据持久化,因此删除容器并不会删除卷,也不会对未被引用的卷做垃圾回收操作
存储卷为Docker提供了独立于容器的数据管理机制,我们可以把镜像想象成静态文件,例如“程序”,把卷类比为动态内容,例如“数据”。所以镜像可以重用,而卷则可以共享。
卷实现了“程序(镜像)”和“数据(卷)”的分离,以及“程序(镜像)”和“制作镜像的主机”的分离,用户制作镜像时无须再考虑镜像运行的容器所在的主机的环境。(可以在这个主机上运行,也可以在另一台主机上运行)
program程序,file system文件系统,写到/下面就是写到容器里(layer),写到/data就是写到卷里(volume)
存储卷的分类
docker的两种类型卷,每种类型都在容器中存在一个挂载点,但在宿主机上的位置不同:
- 绑定挂载卷:一个用户指定的本地的挂载点
- docker管理卷:docker守护进程创建的一个管理卷,Docker 守护程序在主机文件系统的一部分中创建托管卷,该文件系统由 Docker 拥有
左边是容器,右边是主机
容器数据管理
在使用docker的过程中,往往需要查看容器内应用产生的数据,或者需要把容器内的数据进行备份,甚至多个容器之间进行数据的共享,这必然涉及容器的数据管理操作
容器中管理数据主要是两种方式:
- 数据卷
- 数据卷容器
容器Volume使用语法:
Docker-managed volume
docker run -it --name CONTAINER_NAME -v VOLUMEDIR IMAGE_NAME
//终端1
[root@localhost ~]# docker run -it --rm --name b1 -v /data busybox /bin/sh
/ # ls
bin data dev etc home proc root sys tmp usr var
/ # ls /data/
/ # ls /data/ //在真机里操作添加,在容器里可以看到
abc
/ # rm -f data/abc //在容器里也可以操作添加删除,然后真机上查看也没了
/ # exit
[root@localhost ~]#
//终端2
[root@localhost ~]# docker inspect b1
"Mounts": [
{
"Type": "volume",
"Name": "4ac15f3e85b6ea1815dfe167e413cf965a3cf86333683884cb186b7fdb94bc29",
"Source": "/var/lib/docker/volumes/4ac15f3e85b6ea1815dfe167e413cf965a3cf86333683884cb186b7fdb94bc29/_data",
"Destination": "/data",
"Driver": "local",
"Mode": "",
"RW": true,
"Propagation": ""
}
[root@localhost ~]# cd /var/lib/docker/volumes/4ac15f3e85b6ea1815dfe167e413cf965a3cf86333683884cb186b7fdb94bc29/_data
[root@localhost _data]# ls
[root@localhost _data]# touch abc //添加abc
[root@localhost _data]# ls
abc
[root@localhost _data]# ls
[root@localhost _data]# touch abc
touch: cannot touch 'abc': No such file or directory //当容器停止运行或被删除后,就无法进行操作了,这就是容器管理数据卷
[root@localhost _data]# ls
[root@localhost _data]#
Bind mount volume
docker run -it --name CONTAINER_NAME -v HOSTDIR:VOLUMEDIR IMAGE_NAME
//终端1上
[root@localhost ~]# docker run -it --rm --name b1 -v /web:/data busybox //真机/web,容器/data做一个绑定关系
/ # ls
bin data dev etc home proc root sys tmp usr var
/ # ls /data
//终端2上
[root@localhost ~]# ls /
bin dev home lib64 mnt proc run srv tmp var
boot etc lib media opt root sbin sys usr web //自动创建一个web
[root@localhost ~]# cd /web
[root@localhost web]# ls
[root@localhost web]# echo 'hello world' > index.html
[root@localhost web]# ls
index.html
[root@localhost web]# cat index.html
hello world
//终端1上可以看到内容存在了
/ # ls data/
index.html
/ # cd /data
/data # cat index.html
hello world
/data # exit //退出后这个容器也被删除了
[root@localhost ~]# docker ps -a
CONTAINER ID IMAGE COMMAND CREATED STATUS PORTS NAMES
[root@localhost ~]# docker run -it --rm --name b1 -v /web:/data busybox //再用这个创建一个容器,内容还存在
/ # ls
bin data dev etc home proc root sys tmp usr var
/ # ls data/
index.html
/ # cd /data
/data # cat index.html
hello world
/data #
//终端2
[root@localhost web]# ls
index.html
[root@localhost web]# cat index.html
hello world
[root@localhost web]#
部署一个网站
//终端2
[root@localhost ~]# cd /web
[root@localhost web]# ls
[root@localhost web]# wget https://zdown.chinaz.com/202201/seacms-v11.5.211211.zip
[root@localhost web]# ls
seacms-v11.5.211211.zip
[root@localhost web]# unzip seacms-v11.5.211211.zip
[root@localhost web]# ls
SeaCMS_11.5 index.html 说明.htm
seacms-v11.5.211211.zip
[root@localhost web]# mv SeaCMS_11.5/* .
[root@localhost web]# ls
关于.txt 火车采集器模块接口 index.html 说明.htm
伪静态规则.txt 安装使用.txt 许可协议.txt
//终端1
[root@localhost ~]# docker run -d --name web -v /web:/usr/local/apache2/htdocs -p 80:80 httpd
02c0d5700f7390a8b80a0324ca3c7732ffdb0ebfa942b07d054c68ddd42d5769
[root@localhost ~]# docker ps
CONTAINER ID IMAGE COMMAND CREATED STATUS PORTS NAMES
02c0d5700f73 httpd "httpd-foreground" 4 seconds ago Up 3 seconds 0.0.0.0:80->80/tcp, :::80->80/tcp web
[root@localhost ~]# ss -antl
State Recv-Q Send-Q Local Address:Port Peer Address:Port Process
LISTEN 0 128 0.0.0.0:111 0.0.0.0:*
LISTEN 0 128 0.0.0.0:80 0.0.0.0:*
LISTEN 0 128 0.0.0.0:22 0.0.0.0:*
LISTEN 0 5 127.0.0.1:631 0.0.0.0:*
LISTEN 0 128 [::]:111 [::]:*
LISTEN 0 128 [::]:80 [::]:*
LISTEN 0 128 [::]:22 [::]:*
LISTEN 0 5 [::1]:631 [::]:*
用IP地址192.168.31.130访问
在容器中使用数据卷
在容器内创建一个数据卷
下面使用nginx镜像创建一个web容器,并创建一个数据卷挂载到容器的/webapp目录下:
[root@localhost ~]# docker run -d -P --name web -v /webapp nginx
这里的-P是允许外部访问容器需要暴露的端口。
挂载一个主机目录作为数据卷
[root@localhost ~]# docker run -d -P --name web1 -v /var/www/html:/webapp nginx
上面的命令加载主机的/var/www/html目录到容器的/webapp目录:
这个功能在进行测试的时候非常方便,比如用户可以放置一些程序或数据到本地目录中,然后在容器内运行和使用。另外,本地目录的路径必须是绝对路径,如果目录不存在,Docker会自动创建。
Docker挂载数据卷的默认权限是读写(rw),用户也可以通过(ro)指定为只读:
[root@localhost ~]# docker run -d -P --name web2 -v /var/www/html:/webapp:ro nginx
加了:ro以后,容器内挂载的数据卷的数据就无法修改了。
挂载一个本地主机文件作为数据卷
-v选项也可以从主机挂载单个文件到容器中作为数据卷:
[root@localhost ~]# docker run -it --rm -v ~/.bash_history:/.bash_history centos /bin/bash
这样就可以记录在容器输入过的命令历史了。
如果直接挂载一个文件到容器,使用文件编辑工具,包括vi或者sed去修改文件内容的时候,可能会造成inode的改变,这样将会导致错误。所以推荐的方式是直接挂载文件所在的目录。
数据卷容器
数据卷容器就是一个专门用来放数据的容器,而这个容器可以被其他容器所挂载
(用户需要在容器之间共享一些持续更新的数据,最简单的方式是使用数据卷容器)
第一步,创建一个数据卷容器dbdata,并在其中创建一个数据卷挂载到/dbdata
[root@localhost ~]# docker run -itd --name dbdata -v /dbdata busybox
bd461fb390bbe12cab2125e013da584a8d5b25b793cfbc7f38b0573b728ef01e
[root@localhost ~]# docker ps
CONTAINER ID IMAGE COMMAND CREATED STATUS PORTS NAMES
bd461fb390bb busybox "sh" 6 seconds ago Up 5 seconds dbdata
第二步,在其他容器中使用--volumes-from来挂载dbdata容器中的数据卷,例如创建db1和db2两个容器,并从dbdata容器挂载数据卷
[root@localhost ~]# docker run -itd --name db1 --volumes-from dbdata busybox
e178ce87b80c5744aee1b8365862962c113972ebd47a838ac4a72528f7cd4aec
[root@localhost ~]# docker run -itd --name db2 --volumes-from dbdata busybox
3cdf946f49b43217bceb7cb82d0300df0b8d58cbe5d864e23e3f36455cbeb673
[root@localhost ~]# docker ps
CONTAINER ID IMAGE COMMAND CREATED STATUS PORTS NAMES
3cdf946f49b4 busybox "sh" 5 seconds ago Up 4 seconds db2
e178ce87b80c busybox "sh" 17 seconds ago Up 15 seconds db1
bd461fb390bb busybox "sh" 3 minutes ago Up 3 minutes dbdata
第三步,此时db1和db2都挂载同一个数据卷到相同的/dbdata目录,三个容器任何一个在该目录下的写入,其他容器都可以看到
例如,在db1容器中创建一个test文件:
[root@localhost ~]# docker exec -it db1 /bin/sh
/ # ls
bin dev home root tmp var
dbdata etc proc sys usr
/ # cd dbdata/
/dbdata # touch abc
/dbdata # ls
abc
/dbdata #
在db2上查看
[root@localhost ~]# docker exec -it db2 /bin/sh
/ # ls dbdata/
abc
/ #
可以多次使用--volumes-from参数来从多个容器挂载多个数据卷。还可以从其他已挂载了容器卷的容器来挂载数据卷:
[root@localhost ~]# docker run -itd --name db3 --volumes-from db1 busybox
//db3挂载db1,这样也可以和dbdata连起来,内容都是一样的
使用--volumes-from参数所挂载数据卷的容器自身并不需要保持在运行状态。
如果删除了挂载的容器(包括dbdata、db1和db2),数据卷并不会被自动删除。如果要删除一个数据卷,必须在删除最后一个还挂载着它的容器时显式使用docker rm -v命令来指定同时删除关联的容器。
利用数据卷容器迁移数据
可以利用数据卷容器对其中的数据卷进行备份、恢复,以实现数据的迁移。
备份
使用下面的命令来备份dbdata数据卷容器内的数据卷:
[root@localhost ~]# docker run --name worker --volumes-from dbdata -v $(pwd):/backup centos tar cvf /backup/backup.tar /dbdata
具体分析下:
首先利用centos镜像创建了一个容器worker。使用--volumes-from dbdata参数来让worker容器挂载dbdata容器的数据卷(即dbdata数据卷);使用-v $(pwd):/backup参数来挂载本地的当前目录到worker容器的/backup目录。
worker容器启动后,使用了tar cvf /backup/backup.tar /dbdata命令来将/dbdata下内容备份为容器内的/backup/backup.tar,即宿主主机当前目录下的backup.tar。
恢复
如果要恢复数据到一个容器,可以按照下面的操作。首先创建一个带有数据卷的容器dbdata2:
[root@localhost ~]# docker run -it --name dbdata2 -v /dbdata centos /bin/bash
然后创建另一个新的容器,挂载dbdata2容器,并使用untar解压备份文件到所挂载的容器卷中即可:
[root@localhost ~]# docker run --volumes-from dbdata2 -v $(pwd):/backup busybox tar xvf /backup/backup.ta