Docker之docker存储卷

最新推荐文章于 2024-08-17 21:59:34 发布

linlusama

最新推荐文章于 2024-08-17 21:59:34 发布

阅读量446

点赞数

分类专栏： docker 文章标签： docker 容器运维

本文链接：https://blog.csdn.net/weixin_46634416/article/details/121756497

版权

docker 专栏收录该内容

13 篇文章 1 订阅

订阅专栏

Docker之docker存储卷

COW机制

Docker镜像由多个只读层叠加而成，启动容器时，Docker会加载只读镜像层并在镜像栈顶部添加一个读写层。

如果运行中的容器修改了现有的一个已经存在的文件，那么该文件将会从读写层下面的只读层复制到读写层，该文件的只读版本依然存在，只是已经被读写层中该文件的副本所隐藏，这就是“写时复制(COW)”机制。

对于这种方式来说，我们去访问一个文件，修改和删除等一类的操作，其效率会非常的低，因为隔着很多层镜像。

而要想绕过这种限制，我们可以通过使用存储卷的机制来实现。

什么是存储卷

存储卷就是将宿主机的本地文件系统中存在的某个目录直接与容器内部的文件系统上的某一目录建立绑定关系。这就意味着，当我们在容器中的这个目录下写入数据时，容器会将其内容直接写入到宿主机上与此容器建立了绑定关系的目录。

在宿主机上的这个与容器形成绑定关系的目录被称作存储卷。

使用存储卷的好处

如果容器中跑的进程的所有有效数据都保存在存储卷中，从而脱离容器自身文件系统之后，带来的好处是当容器关闭甚至被删除时，只要不删除与此容器绑定的在宿主机上的这个存储目录，我们就不用担心数据丢失了。因此就可以实现数据持久，脱离容器的生命周期而持久。

我们通过这种方式管理容器，容器就可以脱离主机的限制，可以在任意一台部署了docker的主机上跑容器，而其数据则可以置于一个共享存储文件系统上，比如nfs。

Docker的存储卷默认情况下是使用其所在的宿主机上的本地文件系统目录的，也就是说宿主机上有一块属于自己的硬盘，这个硬盘并没有共享给其他的Docker主机，而在这台主机上启动的容器所使用的存储卷是关联到此宿主机硬盘上的某个目录之上。

这就意味着容器在这台主机上停止运行或者被删除了再重建，只要关联到硬盘上的这个目录下，那么其数据还存在。但如果在另一台主机上启动一个新容器，那么数据就没了。而如果在创建容器的时候我们手动的将容器的数据挂载到一台nfs服务器上，那么这个问题就不再是问题了。

为什么要用存储卷

关闭并重启容器，其数据不受影响，但删除Docker容器，则其更改将会全部丢失。

因此Docker存在的问题有：

存储于联合挂载文件系统中，不易于宿主机访问
容器间数据共享不便
删除容器其数据会丢失

而要解决这些问题，解决方案就是使用存储卷。

存储卷管理方式

存储卷（Data Volume）于容器初始化时被自动创建，由base image提供的卷中的数据会于此期间完成复制。

Volume的初衷是独立于容器的生命周期实现数据持久化，因此删除容器之时既不会删除卷，也不会对未被引用的卷做垃圾回收操作。

存储卷为Docker提供了独立于容器的数据管理机制，我们可以把镜像想象成静态文件，例如“程序”，把卷类比为动态内容，例如“数据”。所以镜像可以重用，而卷则可以共享。

卷实现了“程序(镜像)”和“数据(卷)”的分离，以及“程序(镜像)”和“制作镜像的主机”的分离，用户制作镜像时无须再考虑镜像运行的容器所在的主机的环境。

存储卷的分类

Docker有两种类型的卷，每种类型都在容器中存在一个挂载点，但其在宿主机上的位置有所不同：

‎绑定挂载卷
- ‎指向主机文件系统上用户指定位置的卷‎
‎Docker 管理的卷‎
- Docker守护进程在主机文件系统的一部分中创建由Docker管理的卷

容器数据管理

用户在使用Docker的过程中，往往需要能查看容器内应用产生的数据，或者需要把容器内的数据进行备份，甚至多个容器之间进行数据的共享，这必然涉及容器的数据管理操作。

容器中管理数据主要有两种方式：

数据卷（Data Volumes）
数据卷容器（Data Volumes Containers）

容器Volume使用语法：
Docker-managed volume（Docker管理卷）

docker run -it --name CONTAINER_NAME -v VOLUMEDIR IMAGE_NAME

[root@docker ~]# docker run -it --rm --name test -v /test centos /bin/bash 
[root@2a41bc5a6821 /]# ls
bin  etc   lib	  lost+found  mnt  proc  run   srv  test  usr
dev  home  lib64  media       opt  root  sbin  sys  tmp   var
[root@2a41bc5a6821 /]# cd /test/
[root@2a41bc5a6821 test]# ls
[root@2a41bc5a6821 test]# mkdir ccc
[root@2a41bc5a6821 test]# ls
ccc

//查看容器信息
[root@docker ~]# docker container ls 
CONTAINER ID   IMAGE     COMMAND       CREATED              STATUS              PORTS     NAMES
2a41bc5a6821   centos    "/bin/bash"   About a minute ago   Up About a minute             test
[root@docker ~]# docker container inspect test 
........
"GraphDriver": {
            "Data": {
                "LowerDir": "/var/lib/docker/overlay2/2c3931a55698faeee9f0ebc2dd055a15101e62254d83103a46aeab7ba8b86fbf-init/diff:/var/lib/docker/overlay2/7d430e758b80aa888de3121b33d336f9e9602b3a5bc62d6fa0fb04335e3ae142/diff",
                "MergedDir": "/var/lib/docker/overlay2/2c3931a55698faeee9f0ebc2dd055a15101e62254d83103a46aeab7ba8b86fbf/merged",
                "UpperDir": "/var/lib/docker/overlay2/2c3931a55698faeee9f0ebc2dd055a15101e62254d83103a46aeab7ba8b86fbf/diff",
                "WorkDir": "/var/lib/docker/overlay2/2c3931a55698faeee9f0ebc2dd055a15101e62254d83103a46aeab7ba8b86fbf/work"
            },
            "Name": "overlay2"
        },
        "Mounts": [
            {
                "Type": "volume",
                "Name": "9fb10fa5ba8b2c63fdaafc59533fd1e9209663c38bda64c4936be9efda0a98a9",
                "Source": "/var/lib/docker/volumes/9fb10fa5ba8b2c63fdaafc59533fd1e9209663c38bda64c4936be9efda0a98a9/_data",
                "Destination": "/test",
                "Driver": "local",
                "Mode": "",
                "RW": true,
                "Propagation": ""
            }
.........

[root@docker ~]# cd /var/lib/docker/volumes/9fb10fa5ba8b2c63fdaafc59533fd1e9209663c38bda64c4936be9efda0a98a9/_data
[root@docker _data]# ls
ccc

Bind mount volume（绑定挂载卷）

docker run -it --name CONTAINER_NAME -v HOSTDIR:VOLUMEDIR IMAGE_NAME

[root@docker ~]# ls /opt/
containerd
[root@docker ~]# docker run -it --rm --name test -v /opt/test:/test centos /bin/bash 
[root@c5372c84dff6 /]# ls
bin  etc   lib	  lost+found  mnt  proc  run   srv  test  usr
dev  home  lib64  media       opt  root  sbin  sys  tmp   var
[root@c5372c84dff6 /]# cd test/
[root@c5372c84dff6 test]# ls
[root@c5372c84dff6 test]# touch xxx 
[root@c5372c84dff6 test]# echo "woshinidie" > xxx 
[root@c5372c84dff6 test]# cat xxx
woshinidie

//在容器外查看
root@docker ~]# ls /opt/
containerd  test
[root@docker ~]# cd /opt/test/
[root@docker test]# ls
xxx
[root@docker test]# cat xxx 
woshinidie

//退出容器自动删除
[root@c5372c84dff6 test]# exit 
exit

//新安装容器依然也可以使用挂载卷
[root@docker ~]# docker run -it --rm --name test -v /opt/test:/test centos /bin/bash 
[root@b0abc5f9faeb /]# ls     
bin  etc   lib	  lost+found  mnt  proc  run   srv  test  usr
dev  home  lib64  media       opt  root  sbin  sys  tmp   var
[root@b0abc5f9faeb /]# cd /test/
[root@b0abc5f9faeb test]# ls
xxx
[root@b0abc5f9faeb test]# cat xxx 
woshinidie

使用nfs共享存储

nfs	192.168.200.146
docker	192.168.200.150

//安装nfs rpc
[root@localhost ~]# yum -y install nfs-utils rpcbind

//关闭防火墙
[root@localhost ~]# systemctl disable firewalld 
Removed /etc/systemd/system/multi-user.target.wants/firewalld.service.
Removed /etc/systemd/system/dbus-org.fedoraproject.FirewallD1.service.
[root@localhost ~]# setenforce 0

//创建共享目录
[root@localhost ~]# mkdir /nfs 
[root@localhost ~]# mkdir /protected 
[root@localhost ~]#  vim /etc/exports 
[root@localhost ~]# cat /etc/exports
/nfs 192.168.200.150/24(rw)

//设置权限
[root@localhost ~]# setfacl -m u:nobody:rwx /nfs 
[root@localhost ~]# getfacl /nfs/
getfacl: Removing leading '/' from absolute path names
# file: nfs/
# owner: root
# group: root
user::rwx
user:nobody:rwx
group::r-x
mask::rwx
other::r-x

//启动服务
[root@localhost ~]# systemctl enable --now rpcbind 
[root@localhost ~]# systemctl enable --now nfs-server
Created symlink /etc/systemd/system/multi-user.target.wants/nfs-server.service → /usr/lib/systemd/system/nfs-server.service.

//在docker主机上安装nfs
[root@docker ~]# dnf -y install nfs-utils

//查看共享目录
[root@docker ~]# showmount -e 192.168.200.146
Export list for 192.168.200.146:
/nfs 192.168.200.150/24

//创建挂载点 挂载
[root@docker ~]# mkdir /storage 
[root@docker ~]# vim /etc/fstab 
192.168.200.146:/nfs /storage nfs defaults 0 0
[root@docker ~]# mount -a 
[root@docker ~]# df -h 
Filesystem            Size  Used Avail Use% Mounted on
devtmpfs              1.8G     0  1.8G   0% /dev
tmpfs                 1.9G   16K  1.9G   1% /dev/shm
tmpfs                 1.9G  9.1M  1.9G   1% /run
tmpfs                 1.9G     0  1.9G   0% /sys/fs/cgroup
/dev/mapper/cs-root    17G  7.1G   10G  42% /
/dev/nvme0n1p1       1014M  195M  820M  20% /boot
tmpfs                 371M     0  371M   0% /run/user/0
192.168.200.146:/nfs   17G  4.9G   13G  29% /storage

//创建容器
[root@docker ~]# docker run -it --rm --name test -v /storage:/test centos /bin/bash 
[root@af2d7fdb4e1f /]# ls
bin  etc   lib	  lost+found  mnt  proc  run   srv  test  usr
dev  home  lib64  media       opt  root  sbin  sys  tmp   var
[root@af2d7fdb4e1f /]# cd /test/ 
[root@a1251b0d3db5 test]# touch abc 
[root@a1251b0d3db5 test]# echo "oololol" > abc 
[root@a1251b0d3db5 test]# cat abc 
oololol

//在nfs上查看
[root@localhost ~]# cat /nfs/abc 
oololol

//删除容器数据也在
[root@a1251b0d3db5 test]# exit 
exit
[root@docker ~]# docker container ls 
CONTAINER ID   IMAGE     COMMAND   CREATED   STATUS    PORTS     NAMES


[root@localhost ~]# cat /nfs/abc 
oololol

在容器中使用数据卷

在容器内创建一个数据卷

下面使用nginx镜像创建一个web容器，并创建一个数据卷挂载到容器的/webapp目录下：

[root@docker ~]# docker run -it -p 8080:80 -v /var/www/html/:/usr/local/nginx/html linlusama/centos-nginx:v1.20.1  /bin/bash  ##镜像是我自己创建的编译安装的nginx
[root@40f7bd01ad6c /]# /usr/local/nginx/sbin/nginx 
[root@40f7bd01ad6c /]# ss -antl 
State          Recv-Q         Send-Q                   Local Address:Port                   Peer Address:Port         Process         
LISTEN         0              128                            0.0.0.0:80                          0.0.0.0:*          
[root@f25201aa50b8 /]# cd /usr/local/nginx/html/
[root@f25201aa50b8 html]# ls
[root@f25201aa50b8 html]# touch index.html 
[root@f25201aa50b8 html]# echo "123456" > index.html

//主机上查看
[root@docker ~]# ss -antl 
State  Recv-Q Send-Q Local Address:Port Peer Address:Port Process 
LISTEN 0      128          0.0.0.0:22        0.0.0.0:*            
LISTEN 0      25           0.0.0.0:514       0.0.0.0:*            
LISTEN 0      128          0.0.0.0:111       0.0.0.0:*            
LISTEN 0      128          0.0.0.0:8080      0.0.0.0:*            
LISTEN 0      128             [::]:22           [::]:*            
LISTEN 0      25              [::]:514          [::]:*            
LISTEN 0      128             [::]:111          [::]:*            
LISTEN 0      128             [::]:8080         [::]:* 
[root@docker ~]# cd /var/www/html/
[root@docker html]# ls
index.html
[root@docker html]# cat index.html 
123456
[root@docker ~]# curl 192.168.200.150:8080
123456

//可以在主机上直接修改网页的内容
[root@docker html]# echo "hello world" > index.html 
[root@docker html]# curl 192.168.200.150:8080
hello world

上面的命令加载主机的/var/www/html目录到容器的/webapp目录：
这个功能在进行测试的时候非常方便，比如用户可以放置一些程序或数据到本地目录中，然后在容器内运行和使用。另外，本地目录的路径必须是绝对路径，如果目录不存在，Docker会自动创建。

Docker挂载数据卷的默认权限是读写(rw)，用户也可以通过(ro)指定为只读，加了:ro以后，容器内挂载的数据卷的数据就无法修改了

[root@docker ~]# docker run -it -p 8080:80 -v /var/www/html/:/usr/local/nginx/html:ro linlusama/centos-nginx:v1.20.1  /bin/bash 
[root@d9d66bf788c4 /]# ls
bin  etc   lib	  lost+found  mnt  proc  run   srv  tmp  var
dev  home  lib64  media       opt  root  sbin  sys  usr
[root@d9d66bf788c4 /]# /usr/local/nginx/sbin/nginx 
[root@d9d66bf788c4 /]# cd /usr/local/nginx/html/
[root@d9d66bf788c4 html]# ls
index.html
[root@d9d66bf788c4 html]# touch zbc 
touch: cannot touch 'zbc': Read-only file system

//但在主机上可以修改
[root@docker html]# touch zbc 
[root@docker html]# ls
index.html  zbc

//容器上也已经创建
[root@d9d66bf788c4 html]# ls
index.html  zbc

挂载一个本地主机文件作为数据卷
-v选项也可以从主机挂载单个文件到容器中作为数据卷：

[root@docker ~]# docker run -it --rm -v ~/.bash_history:/.bash_history centos /bin/bash

这样就可以记录在容器输入过的命令历史了。

如果直接挂载一个文件到容器，使用文件编辑工具，包括vi或者sed去修改文件内容的时候，可能会造成inode的改变，这样将会导致错误。所以推荐的方式是直接挂载文件所在的目录。

数据卷容器

如果用户需要在容器之间共享一些持续更新的数据，最简单的方式是使用数据卷容器。数据卷容器其实就是一个普通的容器，专门用它提供数据卷供其他容器挂载使用，方法如下：

首先，创建一个数据卷容器dbdata，并在其中创建一个数据卷挂载到/dbdata：

[root@docker ~]# docker run -it --name dbdata -v /dbdata centos

然后可以在其他容器中使用–volumes-from来挂载dbdata容器中的数据卷，例如创建db1和db2两个容器，并从dbdata容器挂载数据卷：

[root@docker html]# docker run -it --name db1 --volumes-from dbdata centos 
[root@72dc45ba6835 /]#
[root@docker ~]# docker run -it --name db2 --volumes-from dbdata centos
[root@b34f80532022 /]#eedb00086cde

此时，容器db1和db2都挂载同一个数据卷到相同的/dbdata目录。三个容器任何一方在该目录下的写入，其他容器都可以看到。
例如，在db1容器中创建一个test文件：

[root@72dc45ba6835 /]# cd /dbdata/
[root@72dc45ba6835 /]mkdir /test

在db2容器中查看：

[root@01885b314917 /]#  ls /dbdata/
test

可以多次使用–volumes-from参数来从多个容器挂载多个数据卷。还可以从其他已挂载了容器卷的容器来挂载数据卷：

[root@docker ~]# docker run -it --name db3 --volumes-from db1 centos
[root@bf94f1dbdb43 /]# ls /dbdata/
test
[root@bf94f1dbdb43 /]# mkdir /dbdata/test/abc 
[root@bf94f1dbdb43 /]# exit 


[root@docker ~]# docker exec -it db2 /bin/bash 
[root@01885b314917 /]# ls /dbdata/test/
abc

使用–volumes-from参数所挂载数据卷的容器自身并不需要保持在运行状态。

如果删除了挂载的容器（包括dbdata、db1和db2），数据卷并不会被自动删除。如果要删除一个数据卷，必须在删除最后一个还挂载着它的容器时显式使用docker rm -v命令来指定同时删除关联的容器。

利用数据卷容器迁移数据

可以利用数据卷容器对其中的数据卷进行备份、恢复，以实现数据的迁移。

备份
使用下面的命令来备份dbdata数据卷容器内的数据卷：

[root@docker ~]# docker run --name test --volumes-from dbdata -v $(pwd):/backup centos tar zcf /backup/backup.tar.gz /dbdata
tar: Removing leading `/' from member names
[root@docker ~]# ls
anaconda-ks.cfg                            backup.tar.gz

这个命令稍微有点复杂，具体分析下。
首先利用centos镜像创建了一个容器worker。使用–volumes-from dbdata参数来让worker容器挂载dbdata容器的数据卷（即dbdata数据卷）；使用-v $(pwd):/backup参数来挂载本地的当前目录到worker容器的/backup目录。
worker容器启动后，使用了tar zcf /backup/backup.tar /dbdata命令来将/dbdata下内容备份为容器内的/backup/backup.tar.gz，即宿主主机当前目录下的backup.tar.gz。

恢复
如果要恢复数据到一个容器，可以按照下面的操作。首先创建一个带有数据卷的容器dbdata2：

[root@docker ~]# docker run -it --name test2 -v /dbdata centos /bin/bash

然后创建另一个新的容器，挂载dbdata2容器，并使用untar解压备份文件到所挂载的容器卷中即可：

[root@docker ~]# docker run --volumes-from test2  -v $(pwd):/backup centos tar xf /backup/backup.tar.gz

创建一个nginx容器提供配置文件和网页

//创建一个网页容器卷
[root@docker ~]# docker run -itd --name web -v /var/www/html:/usr/local/nginx/html linlusama/centos-nginx:v1.20.1  
7be268093bb440b5cc71407d926210ce03b36dd39181e1f9ec0490280df3bd61

[root@docker ~]# docker container ls 
CONTAINER ID   IMAGE                            COMMAND                  CREATED          STATUS          PORTS     NAMES
7be268093bb4   linlusama/centos-nginx:v1.20.1   "/usr/local/nginx/sb…"   21 seconds ago   Up 19 seconds             web

//创建配置文件存放目录
[root@docker ~]# mkdir /nginx_config
[root@docker ~]# cd /usr/local/nginx/conf 
[root@docker conf]# cp -a * /nginx_config/

//根据web容器卷创建一个nginx_confi容器
[root@docker ~]# docker run --name nginx_conf --volumes-from web -v /nginx_config:/usr/local/nginx/conf busybox
[root@docker ~]# docker container ls -a 
CONTAINER ID   IMAGE                            COMMAND                  CREATED          STATUS                      PORTS     NAMES
abb862b61dcc   busybox                          "sh"                     23 seconds ago   Exited (0) 23 seconds ago             nginx_conf
7be268093bb4   linlusama/centos-nginx:v1.20.1   "/usr/local/nginx/sb…"   9 minu
nutes                          web

//基于nginx_conf创建nginx容器
[root@docker ~]# docker run -it --name nginx -p 80:80 --volumes-from nginx_conf linlusama/centos-nginx:v1.20.1 /bin/bash 

[root@751cdd07db6d /]# cd /usr/local/nginx/conf/
[root@751cdd07db6d conf]# ls
fastcgi.conf		koi-win		    scgi_params
fastcgi.conf.default	mime.types	    scgi_params.default
fastcgi_params		mime.types.default  uwsgi_params
fastcgi_params.default	nginx.conf	    uwsgi_params.default
koi-utf			nginx.conf.default  win-utf

[root@751cdd07db6d conf]# cd ..
[root@751cdd07db6d nginx]# ls html/
css  images  index.html  js  js记忆翻牌匹配小游戏代码.zip

//在本地机编辑/var/www/html
[root@docker ~]# cd /var/www/html/
[root@docker html]# ls
css  images  index.html  js  js记忆翻牌匹配小游戏代码.zip
[root@docker html]# mv * /opt/
[root@docker html]# echo "This is bbc" > index.html 
[root@docker html]# ls
index.html

[root@751cdd07db6d nginx]# cd /usr/local/nginx/html/
[root@751cdd07db6d html]# ls
index.html