docker存储卷
coW机制
Docker镜像由多个只读层叠加而成,启动容器时,Docker会加载只读镜像层并在镜像栈顶部添加一个读写层。
如果运行中的容器修改了现有的一个已经存在的文件,那么该文件将会从读写层下面的只读层复制到读写层,该文件的只读版本依然存在,只是已经被读写层中该文件的副本所隐藏,这就是“写时复制(CoW)”机制。
对于这种方式来说,我们去访问一个文件,修改和删除等一类的操作,其效率会非常的低,因为隔着很多层镜像。
而要想绕过这种限制,我们可以通过使用存储卷的机制来实现。
什么是存储卷
存储卷就是将宿主机的本地文件系统中存在的某个目录直接与容器内部的文件系统上的某一目录建立绑定关系。这就意味着,当我们在容器中的这个目录下写入数据时,容器会将其内容直接写入到宿主机上与此容器建立了绑定关系的目录。
在宿主机上的这个与容器形成绑定关系的目录被称作存储卷。
使用存储卷的好处
如果容器中跑的进程的所有有效数据都保存在存储卷中,从而脱离容器自身文件系统之后,带来的好处是当容器关闭甚至被删除时,只要不删除与此容器绑定的在宿主机上的这个存储目录,我们就不用担心数据丢失了。因此就可以实现数据持久,脱离容器的生命周期而持久。
我们通过这种方式管理容器,容器就可以脱离主机的限制,可以在任意一台部署了docker的主机上跑容器,而其数据则可以置于一个共享存储文件系统上,比如nfs。
Docker的存储卷默认情况下是使用其所在的宿主机上的本地文件系统目录的,也就是说宿主机上有一块属于自己的硬盘,这个硬盘并没有共享给其他的Docker主机,而在这台主机上启动的容器所使用的存储卷是关联到此宿主机硬盘上的某个目录之上。
这就意味着容器在这台主机上停止运行或者被删除了再重建,只要关联到硬盘上的这个目录下,那么其数据还存在。但如果在另一台主机上启动一个新容器,那么数据就没了。而如果在创建容器的时候我们手动的将容器的数据挂载到一台nfs服务器上,那么这个问题就不再是问题了。
为什么要用存储卷
关闭并重启容器,其数据不受影响,但删除Docker容器,则其更改将会全部丢失。
因此Docker存在的问题有:
存储于联合挂载文件系统中,不易于宿主机访问
容器间数据共享不便
删除容器其数据会丢失
而要解决这些问题,解决方案就是使用存储卷。
存储卷管理方式
存储卷(Data Volume)于容器初始化时被自动创建,由base image提供的卷中的数据会于此期间完成复制。
Volume的初衷是独立于容器的生命周期实现数据持久化,因此删除容器之时既不会删除卷,也不会对未被引用的卷做垃圾回收操作。
存储卷为Docker提供了独立于容器的数据管理机制,我们可以把镜像想象成静态文件,例如“程序”,把卷类比为动态内容,例如“数据”。所以镜像可以重用,而卷则可以共享。
卷实现了“程序(镜像)”和“数据(卷)”的分离,以及“程序(镜像)”和“制作镜像的主机”的分离,用户制作镜像时无须再考虑镜像运行的容器所在的主机的环境。
存储卷的分类
Docker有两种类型的卷,每种类型都在容器中存在一个挂载点,但其在宿主机上的位置有所不同:
- 绑定挂载卷
- 指向主机文件系统上用户指定位置的卷 - docker管理的卷
- Docker守护进程在主机文件系统的某一个挂载点上创建管理的卷,这些卷归Docker所拥有
容器数据管理
用户在使用Docker的过程中,往往需要能查看容器内应用产生的数据,或者需要把容器内的数据进行备份,甚至多个容器之间进行数据的共享,这必然涉及容器的数据管理操作。
容器中管理数据主要有两种方式:
数据卷(Data Volumes)
数据卷容器(Data Volumes Containers)
容器Volume使用语法:
docker管理的卷
这种方式创建的容器删除后容器内的数据将消失
[root@localhost ~]# docker run -it --name yy --rm -v /data busybox
Unable to find image 'busybox:latest' locally
latest: Pulling from library/busybox
3aab638df1a9: Pull complete
Digest: sha256:52817dece4cfe26f581c834d27a8e1bcc82194f914afe6d50afad5a101234ef1
Status: Downloaded newer image for busybox:latest
/ # ls
bin data dev etc home proc root sys tmp usr var
/ #
新开一个终端查看此容器的信息
[root@localhost ~]# docker inspect yy
"Name": "overlay2"
},
"Mounts": [
{
"Type": "volume",
"Name": "e5ab1dbf51214e8f893a15bd7546991aac036df4523c3728a9c9dffd73c82d96",
"Source": "/var/lib/docker/volumes/e5ab1dbf51214e8f893a15bd7546991aac036df4523c3728a9c9dffd73c82d96/_data",
"Destination": "/data",
"Driver": "local",
"Mode": "",
"RW": true,
"Propagation": ""
}
[root@localhost ~]# cd /var/lib/docker/volumes/e5ab1dbf51214e8f893a15bd7546991aac036df4523c3728a9c9dffd73c82d96/
[root@localhost e5ab1dbf51214e8f893a15bd7546991aac036df4523c3728a9c9dffd73c82d96]# ls _data/
[root@localhost e5ab1dbf51214e8f893a15bd7546991aac036df4523c3728a9c9dffd73c82d96]#
# 回到创建容器的终端
/ # ls data
/ # touch data/abc
/ # ls data/
abc
# 回到查看容器信息的终端查看
[root@localhost e5ab1dbf51214e8f893a15bd7546991aac036df4523c3728a9c9dffd73c82d96]# ls _data/
abc
# 删除容器后数据就消失
/ # exit
# 回到查看容器信息的终端查看
[root@localhost e5ab1dbf51214e8f893a15bd7546991aac036df4523c3728a9c9dffd73c82d96]# ls
[root@localhost e5ab1dbf51214e8f893a15bd7546991aac036df4523c3728a9c9dffd73c82d96]#
挂载绑定的卷
这种方式创建的容器在删除容器后数据依旧存在
# 在一个终端创建容器
[root@localhost ~]# ls /opt/
[root@localhost ~]# docker run -it --name bb --rm -v /opt/data:/data busybox
/ # ls data
/ #
# 使用另一个终端查看
[root@localhost ~]# ls /opt/
data
# 回到创建容器的终端
/ # touch data/abc
/ # echo '123' > /data/abc
/ # cat data/abc
123
# 再使用另一个终端查看
[root@localhost ~]# ls /opt/data/
abc
[root@localhost ~]# cat /opt/data/abc
123
# 回到创建容器的终端
/# exit # 退出容器
[root@localhost ~]# docker ps -a
CONTAINER ID IMAGE COMMAND CREATED STATUS PORTS NAMES
# 再使用另一个终端查看数据是否存在
[root@localhost ~]# ls /opt/data/
abc
[root@localhost ~]# cat /opt/data/abc
123
在容器中使用数据卷
在容器内创建一个数据卷
下面使用centos镜像创建一个httpd容器,并创建一个数据卷挂载到容器的相应目录下:
[root@localhost ~]# docker images
REPOSITORY TAG IMAGE ID CREATED SIZE
busybox latest d23834f29b38 6 days ago 1.24MB
centos latest 5d0da3dc9764 2 months ago 231MB
[root@localhost ~]# docker run -it --name httpd centos /bin/bash
/#
[root@localhost ~]# docker ps
CONTAINER ID IMAGE COMMAND CREATED STATUS PORTS NAMES
dc5f124be29a centos "/bin/bash" 24 seconds ago Up 23 seconds httpd
[root@localhost ~]# ls /usr/src/
apr-1.7.0.tar.gz apr-util-1.6.1.tar.gz debug httpd-2.4.49.tar.gz kernels
[root@localhost ~]# docker cp /usr/src/apr-1.7.0.tar.gz apache:/usr/src
[root@localhost ~]# docker cp /usr/src/apr-util-1.6.1.tar.gz apache:/usr/src
[root@localhost ~]# docker cp /usr/src/httpd-2.4.49.tar.gz apache:/usr/src
[root@dc5f124be29a /]# ls /usr/src/
apr-1.7.0.tar.gz apr-util-1.6.1.tar.gz debug httpd-2.4.49.tar.gz kernels
[root@dc5f124be29a /]# yum group mark install 'Development Tools'
[root@dc5f124be29a /]# useradd -r -M -s /sbin/nologin httpd
[root@dc5f124be29a /]# id httpd
uid=998(httpd) gid=996(httpd) groups=996(httpd)
[root@dc5f124be29a /]# yum -y install openssl-devel pcre-devel expat-devel libtool gcc gcc-c++ make wget vim net-tools which
[root@dc5f124be29a /]# cd /usr/src/
[root@dc5f124be29a src]# ls
apr-1.7.0.tar.gz apr-util-1.6.1.tar.gz debug httpd-2.4.49.tar.gz kernels
[root@dc5f124be29a src]# tar xf apr-1.7.0.tar.gz
[root@dc5f124be29a src]# tar xf apr-util-1.6.1.tar.gz
[root@dc5f124be29a src]# tar xf httpd-2.4.49.tar.gz
[root@dc5f124be29a src]# ls
apr-1.7.0 apr-util-1.6.1 debug httpd-2.4.49.tar.gz
apr-1.7.0.tar.gz apr-util-1.6.1.tar.gz httpd-2.4.49 kernels
# 进到apr目录编译
[root@dc5f124be29a src]# cd apr-1.7.0
[root@dc5f124be29a apr-1.7.0]# vim configure
cfgfile=${ofile}T
trap "$RM \"$cfgfile\"; exit 1" 1 2 15
# $RM "$cfgfile"
cat <<_LT_EOF >> "$cfgfile"
[root@dc5f124be29a apr-1.7.0]# ./configure --prefix=/usr/local/apr
[root@dc5f124be29a apr-1.7.0]# make && make install
[root@dc5f124be29a apr-1.7.0]# cd ../apr-util-1.6.1
[root@dc5f124be29a apr-util-1.6.1]# ./configure --prefix=/usr/local/apr-util --with-apr=/usr/local/apr
[root@dc5f124be29a apr-util-1.6.1]# make && make install
[root@dc5f124be29a apr-util-1.6.1]# cd ../httpd-2.4.49
[root@dc5f124be29a httpd-2.4.49]# ./configure --prefix=/usr/local/apache \
--enable-so \
--enable-ssl \
--enable-cgi \
--enable-rewrite \
--with-zlib \
--with-pcre \
--with-apr=/usr/local/apr \
--with-apr-util=/usr/local/apr-util/ \
--enable-modules=most \
--enable-mpms-shared=all \
--with-mpm=prefork
[root@dc5f124be29a httpd-2.4.49]# make && make install
[root@dc5f124be29a httpd-2.4.49]# cd
[root@dc5f124be29a ~]# ss -anlt
State Recv-Q Send-Q Local Address:Port Peer Address:Port Process
[root@dc5f124be29a ~]# /usr/local/apache/bin/apachectl start
[root@dc5f124be29a ~]# ss -anlt
State Recv-Q Send-Q Local Address:Port Peer Address:Port Process
LISTEN 0 128 0.0.0.0:80 0.0.0.0:*
[root@dc5f124be29a ~]# curl 192.168.2.2
<html><body><h1>It works!</h1></body></html>
[root@dc5f124be29a ~]# vi /opt/start.sh
#!/bin/bash
/usr/local/apache/bin/apachectl -D FOREGROUND
[root@dc5f124be29a ~]# chmod +x /opt/start.sh
[root@dc5f124be29a ~]# ls
anaconda-ks.cfg anaconda-post.log original-ks.cfg start.sh
# 打开新的终端将其做成镜像
[root@localhost ~]# docker commit -c 'CMD ["/opt/start.sh"]' apache yanghaixx/httpd:v1
sha256:5e1d71411eeb700d548a42b665652b168cee54af2699e930f97a8b1fc4a1b2bf
[root@localhost ~]# docker images
REPOSITORY TAG IMAGE ID CREATED SIZE
yanghaixx/httpd v1 5e1d71411eeb 2 seconds ago 741MB
# 创建映射目录
[root@localhost ~]# mkdir -p /var/www/html
[root@localhost html]# ls
css index.html js img
# 将宿主机的/var/www/html目录映射到http容器中的/usr/local/apache/htdocs目录中
# 挂载一个主机目录作为数据卷
[root@localhost html]# docker run -d -p 80:80 --name web -v /var/www/html:/usr/local/apache/htdocs/ yanghaixx/httpd:v1
8099a4207aed184a5feea01cb9e23a32c853492c2744ffa6a6444825c669e37e
[root@localhost ~]# docker ps
CONTAINER ID IMAGE COMMAND CREATED STATUS PORTS NAMES
8099a4207aed yanghaixx/httpd:v1 "/opt/start.sh" About a minute ago Up About a minute 0.0.0.0:80->80/tcp, :::80->80/tcp web
[root@localhost html]# ss -anlt
State Recv-Q Send-Q Local Address:Port Peer Address:Port Process
LISTEN 0 128 0.0.0.0:80 0.0.0.0:*
# 查看宿主机IP
[root@localhost ~]# ip a
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 65536 qdisc noqueue state UNKNOWN group default qlen 1000
link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
inet 127.0.0.1/8 scope host lo
valid_lft forever preferred_lft forever
inet6 ::1/128 scope host
valid_lft forever preferred_lft forever
2: ens33: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc fq_codel state UP group default qlen 1000
link/ether 00:0c:29:e0:e7:fa brd ff:ff:ff:ff:ff:ff
inet 192.168.197.131/24 brd 192.168.197.255 scope global noprefixroute ens33
valid_lft forever preferred_lft forever
inet6 fe80::a481:4471:9402:58ac/64 scope link noprefixroute
valid_lft forever preferred_lft forever
浏览器访问