docker存储卷
文章目录
1.COW机制
Docker镜像由多个只读层叠加而成,启动容器时,Docker会加载只读镜像层并在镜像栈顶部添加一个读写层。
如果运行中的容器修改了现有的一个已经存在的文件,那么该文件将会从读写层下面的只读层复制到读写层,该文件的只读版本依然存在,只是已经被读写层中该文件的副本所隐藏,这就是“写时复制(COW)”机制。
对于这种方式来说,我们去访问一个文件,修改和删除等一类的操作,其效率会非常的低,因为隔着很多层镜像。
而要想绕过这种限制,我们可以通过使用存储卷的机制来实现。
2.什么是存储卷
存储卷就是将宿主机的本地文件系统中存在的某个目录直接与容器内部的文件系统上的某一目录建立绑定关系。这就意味着,当我们在容器中的这个目录下写入数据时,容器会将其内容直接写入到宿主机上与此容器建立了绑定关系的目录。
在宿主机上的这个与容器形成绑定关系的目录被称作存储卷。
3.使用存储卷的好处
如果容器中跑的进程的所有有效数据都保存在存储卷中,从而脱离容器自身文件系统之后,带来的好处是当容器关闭甚至被删除时,只要不删除与此容器绑定的在宿主机上的这个存储目录,我们就不用担心数据丢失了。因此就可以实现数据持久,脱离容器的生命周期而持久。
我们通过这种方式管理容器,容器就可以脱离主机的限制,可以在任意一台部署了docker的主机上跑容器,而其数据则可以置于一个共享存储文件系统上,比如nfs。
Docker的存储卷默认情况下是使用其所在的宿主机上的本地文件系统目录的,也就是说宿主机上有一块属于自己的硬盘,这个硬盘并没有共享给其他的Docker主机,而在这台主机上启动的容器所使用的存储卷是关联到此宿主机硬盘上的某个目录之上。
这就意味着容器在这台主机上停止运行或者被删除了再重建,只要关联到硬盘上的这个目录下,那么其数据还存在。但如果在另一台主机上启动一个新容器,那么数据就没了。而如果在创建容器的时候我们手动的将容器的数据挂载到一台nfs服务器上,那么这个问题就不再是问题了。
4.为什么用存储卷
关闭并重启容器,其数据不受影响,但删除Docker容器,则其更改将会全部丢失。
因此Docker存在的问题有:
- 存储于联合挂载文件系统中,不易于宿主机访问
- 容器间数据共享不便
- 删除容器其数据会丢失
而要解决这些问题,解决方案就是使用存储卷。
5.存储卷的管理方式
存储卷(Data Volume)于容器初始化时被自动创建,由base image提供的卷中的数据会于此期间完成复制。
Volume的初衷是独立于容器的生命周期实现数据持久化,因此删除容器之时既不会删除卷,也不会对未被引用的卷做垃圾回收操作。
存储卷为Docker提供了独立于容器的数据管理机制,我们可以把镜像想象成静态文件,例如“程序”,把卷类比为动态内容,例如“数据”。所以镜像可以重用,而卷则可以共享。
卷实现了“程序(镜像)”和“数据(卷)”的分离,以及“程序(镜像)”和“制作镜像的主机”的分离,用户制作镜像时无须再考虑镜像运行的容器所在的主机的环境。
6.存储卷的分类
Docker有两种类型的卷,每种类型都在容器中存在一个挂载点,但其在宿主机上的位置有所不同:
- 绑定装载卷
- 指向主机文件系统上用户指定位置的卷 - Docker 管理的卷
- Docker 守护程序在主机文件系统的一部分中创建托管卷,该部分归 Docker 所有
7.容器数据管理
用户在使用Docker的过程中,往往需要能查看容器内应用产生的数据,或者需要把容器内的数据进行备份,甚至多个容器之间进行数据的共享,这必然涉及容器的数据管理操作。
容器中管理数据主要有两种方式:
- 数据卷(Data Volumes)
- 数据卷容器(Data Volumes Containers)
容器Volume使用语法:
Docker-managed volume
docker run -it --name CONTAINER_NAME -v VOLUMEDIR IMAGE_NAME
[root@localhost ~]# docker run -dit --name qq -v /conf centos
Unable to find image 'centos:latest' locally
latest: Pulling from library/centos
a1d0c7532777: Pull complete
Digest: sha256:a27fd8080b517143cbbbab9dfb7c8571c40d67d534bbdee55bd6c473f432b177
Status: Downloaded newer image for centos:latest
dce659969c1ab2352cca056ba43698031865932a9c3f58ceed1cab12fd0dde26
[root@localhost ~]# docker inspect qq|grep "Source"
"Source": "/var/lib/docker/volumes/77d5e3d60b33e95452daeaa549e0ad3fc1473a3f4133df22d8c035b1faff6fca/_data",
[root@localhost ~]# cd /var/lib/docker/volumes/77d5e3d60b33e95452daeaa549e0ad3fc1473a3f4133df22d8c035b1faff6fca/_data
[root@localhost _data]# ls
[root@localhost _data]# mkdir a b c
[root@localhost _data]# ls
a b c
[root@localhost _data]# cd
[root@localhost ~]# docker exec -it qq /b
bin/ boot/
[root@localhost ~]# docker exec -it qq /bin/bash
[root@dce659969c1a /]# ls
bin dev home lib64 media opt root sbin sys usr
conf etc lib lost+found mnt proc run srv tmp var
[root@dce659969c1a ~]# ls /conf/
a b c
绑定装载卷
docker run -it --name CONTAINER_NAME -v HOSTDIR:VOLUMEDIR IMAGE_NAME
[root@localhost ~]# docker run -dit --name ww -v /ww:/tt httpd
4045001f5da02848e52727da5c93f9469b82afc1a63dcbb014723d4b4e8588f7
[root@localhost ~]# cd /
[root@localhost /]# ls
bin dev home lib64 mnt proc run srv tmp var
boot etc lib media opt root sbin sys usr ww
[root@localhost /]# cd ww
[root@localhost ww]# echo 1234 > index.html
[root@localhost ww]# ls
index.html
[root@localhost ww]# docker exec -it ww /bin/bash
root@4045001f5da0:/usr/local/apache2# cd /
root@4045001f5da0:/# ls
bin dev home lib64 mnt proc run srv tmp usr
boot etc lib media opt root sbin sys tt var
root@4045001f5da0:/# cd tt
root@4045001f5da0:/tt# ls
index.html
root@4045001f5da0:/tt# cat index.html
1234
7.1在容器中使用数据卷
在容器内创建一个数据卷
下面使用nginx镜像创建一个web容器,并创建一个数据卷挂载到容器的/webapp目录下:
[root@localhost ~]# docker run -itd --name t1 -P -v /web httpd
1e33126f78b2a20fe0dd87d6f1c91f1c3414c4ba9fa5e7099c085a19fd471a7c
[root@localhost ~]# docker ps
CONTAINER ID IMAGE COMMAND CREATED STATUS PORTS NAMES
1e33126f78b2 httpd "httpd-foreground" 5 seconds ago Up 5 seconds 0.0.0.0:49153->80/tcp, :::49153->80/tcp t1
这里的-P是允许外部访问容器需要暴露的端口。
挂载一个主机目录作为数据卷
[root@localhost ~]# docker run -dit --name t2 -P -v /var/www/html:/web httpd
3a086eef5fcb344a0f7d8ef03ccb217599b321d4307867c5aa72b34f3f6d614a
[root@localhost ~]# docker ps
CONTAINER ID IMAGE COMMAND CREATED STATUS PORTS NAMES
3a086eef5fcb httpd "httpd-foreground" 53 seconds ago Up 52 seconds 0.0.0.0:49154->80/tcp, :::49154->80/tcp t2
1e33126f78b2 httpd "httpd-foreground" 4 minutes ago Up 4 minutes 0.0.0.0:49153->80/tcp, :::49153->80/tcp t1
上面的命令加载主机的/var/www/html
目录到容器/web
的目录:
这个功能在进行测试的时候非常方便,比如用户可以放置一些程序或数据到本地目录中,然后在容器内运行和使用。 另外,本地目录的路径必须是绝对路径,如果目录不存在,Docker会自动创建。
[root@localhost ~]# cd /var/www/html/
[root@localhost html]# ls
[root@localhost html]# mkdir y h m
[root@localhost html]# ls
h m y
[root@localhost html]# cd
[root@localhost ~]# docker exec -it t2 /bin/bash
root@3a086eef5fcb:/usr/local/apache2# cd /web/
root@3a086eef5fcb:/web# ls
h m y
Docker挂载数据卷的默认权限是读写(rw),用户也可以通过(ro)指定为只读:
[root@localhost ~]# docker run -dit --name t3 -P -v /var/www/html:/web:ro httpd
c1093f027d9afa5c1d58820309cbd6fa8e56cb995e04914efb419e0fd9c9f761
[root@localhost ~]# docker exec -it t3 /bin/bash
root@c1093f027d9a:/usr/local/apache2# cd /web/
root@c1093f027d9a:/web# ls
h m y
root@c1093f027d9a:/web# touch 1
touch: cannot touch '1': Read-only file system
root@c1093f027d9a:/web# rm -rf y
rm: cannot remove 'y': Read-only file system
root@c1093f027d9a:/web# exit
exit
加了:ro以后,容器内挂载的数据卷的数据就无法修改了。
挂载一个本地主机文件作为数据卷
-v选项也可以从主机挂载单个文件到容器中作为数据卷:
[root@localhost ~]# echo yhm > /root/index.html
[root@localhost ~]# docker run -dit --rm --name t4 -v /root/index.html:/index.html httpd
058a1600bf97a5d372f2c3fe443070edb8f4794749b7a1b39e03509d4fd0b63f
[root@localhost ~]# docker exec -it t4 /bin/bash
root@058a1600bf97:/usr/local/apache2# cd /
root@058a1600bf97:/# ls
bin dev home lib media opt root sbin sys usr
boot etc index.html lib64 mnt proc run srv tmp var
root@058a1600bf97:/# cat index.html
yhm
这样就可以记录在容器输入过的命令历史了。
如果直接挂载一个文件到容器,使用文件编辑工具,包括vi或者sed去修改文件内容的时候,可能会造成inode的改变,这样将会导致错误。 所以推荐的方式是直接挂载文件所在的目录。
7.2数据卷容器
如果用户需要在容器之间共享一些持续更新的数据,最简单的方式是使用数据卷容器。 数据卷容器其实就是一个普通的容器,专门用它提供数据卷供其他容器挂载使用,方法如下:
首先,创建一个数据卷容器xq1,并在其中创建一个数据卷挂载到xq1:
[root@localhost ~]# docker run -dit --name xq1 -v /data centos
ab57a4a869365cc30543e4f54884bcb786937980d8e58ff916ff723cec359992
然后可以在其他容器中使用–volumes-from来挂载xq1容器中的数据卷,例如创建xq2和xq3两个容器,并从xq1容器挂载数据卷:
[root@localhost ~]# docker run -dit --name xq2 --volumes-from xq1 centos
477a88c2f9a31b54c8bd7def2c7101c0c14a49629d3d7aaa29b8fa48dd6a09b9
[root@localhost ~]# docker run -dit --name xq3 --volumes-from xq1 centos
fdbf26702c37911e8657b0de9c21d8b4c1745e18f3f6e892f7c2acc49c9ee3ce
此时,容器xq2和xq3都挂载同一个数据卷到相同的/data目录。 三个容器任何一方在该目录下的写入,其他容器都可以看到。
例如,在xq2容器中创建一个文件:
[root@localhost ~]# docker exec -it xq2 /bin/bash
[root@477a88c2f9a3 /]# cd data/
[root@477a88c2f9a3 data]# ls
[root@477a88c2f9a3 data]# touch yhm xiaoqi
[root@477a88c2f9a3 data]# ls
xiaoqi yhm
在xq3容器中查看:
[root@localhost ~]# docker exec -it xq3 /bin/bash
[root@fdbf26702c37 /]# cd data/
[root@fdbf26702c37 data]# ls
xiaoqi yhm
可以多次使用–volumes-from参数来从多个容器挂载多个数据卷。 还可以从其他已挂载了容器卷的容器来挂载数据卷:
[root@localhost ~]# docker run -dit --name xq4 --volumes-from xq3 httpd
9f0c2cd87744f7589bc8311f039a4cb4d79d496ac2534de9ab897a66d370ab66
[root@localhost ~]# docker exec -it xq4 /bin/bash
root@9f0c2cd87744:/usr/local/apache2# ls /data/
xiaoqi yhm
使用–volumes-from参数所挂载数据卷的容器自身并不需要保持在运行状态。
如果删除了挂载的容器(包括dbdata、db1和db2),数据卷并不会被自动删除。 如果要删除一个数据卷,必须在删除最后一个还挂载着它的容器时显式使用docker rm -v命令来指定同时删除关联的容器
7.3利用数据卷迁移数据
可以利用数据卷容器对其中的数据卷进行备份、恢复,以实现数据的迁移。
备份
使用下面的命令来备份t1数据卷容器内的数据卷:
[root@localhost ~]# docker run -dit --name t1 -v /data centos
e563cca6e69b169ac0b493829cf6935fc8ccc04a6a4e1b1dfcba3182f91f5a14
[root@localhost ~]# docker ps
CONTAINER ID IMAGE COMMAND CREATED STATUS PORTS NAMES
e563cca6e69b centos "/bin/bash" 15 seconds ago Up 13 seconds t1
[root@localhost ~]# docker run -dit --name t2 -v $(pwd):/backup --volumes-from t1 centos tar cvf /backup/backup.tar /data
7b92da91f847a4296d67fc1f88aeb7774eb907b56c08fd0a92c2023083d6bca9
[root@localhost ~]# ls
anaconda-ks.cfg backup.tar index.html
这个命令稍微有点复杂,具体分析下。
首先利用centos镜像创建了一个容器t2。 使用–volumes-from t1参数来让容器t2挂载t1容器的数据卷; 使用-v $(pwd):/backup参数来挂载本地的当前目录到t2容器的/data目录。
t2容器启动后,使用了 tar cvf /backup/backup.tar /data命令来将/data下内容备份为容器内的/backup/backup.tar,即宿主主机当前目录下的backup.tar。
恢复
如果要恢复数据到一个容器,可以按照下面的操作。 首先创建一个带有数据卷的容器t3:
[root@localhost ~]# docker run -dit --name t3 -v /data centos
754ac71fea847fc49d04f9dad2857cdafab41ca59208f0c4e72632063521a718
[root@localhost ~]# docker ps
CONTAINER ID IMAGE COMMAND CREATED STATUS PORTS NAMES
754ac71fea84 centos "/bin/bash" 9 seconds ago Up 8 seconds t3
e563cca6e69b centos "/bin/bash" 8 minutes ago Up 8 minutes t1
然后创建另一个新的容器t4,挂载t3容器,并使用untar解压备份文件到所挂载的容器卷中即可:
[root@localhost ~]# docker run -dit --name t4 --volumes-from t3 -v $(pwd):/backup centos tar cvf /backup/backup.tar
213edff5cec53c67601872e50cc0f7b61d059adf2dddc762075e84989d1c8839
[root@localhost ~]# docker ps -a
CONTAINER ID IMAGE COMMAND CREATED STATUS PORTS NAMES
213edff5cec5 centos "tar cvf /backup/bac…" About a minute ago Exited (2) About a minute ago t4
754ac71fea84 centos "/bin/bash" 9 minutes ago Up 8 minutes t3