Docker容器数据卷技术（实现数据同步）

最新推荐文章于 2024-08-30 08:25:10 发布
最新推荐文章于 2024-08-30 08:25:10 发布
阅读量1.6k 收藏 2
点赞数
分类专栏： 运维 文章标签： docker linux mysql
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_25046827/article/details/127638133
版权

文章目录

一、什么是数据卷

数据卷是一个可供容器使用的特殊目录，它将主机操作系统目录直接映射进容器，类似于Linux中的mount操作。

数据卷可以提供很多有用的特性，如下所示：

  1. 数据卷可以在容器之间共享和重用，容器间传递数据将变得高效方便；
  2. 对数据卷内数据的修改会立马生效，无论是容器内操作还是本地操作；
  3. 对数据卷的更新不会影响镜像，解耦了应用和数据；
  4. 卷会一直存在，直到没有容器使用，可以安全地卸载它。

二、使用数据卷

1、通过命令挂载 -v
docker run -d -v 主机目录:容器内目录

# 检查
docker inspect 容器

# 示例
docker run -p 3307:3306 --name mysql02 -v /data/mysql02/conf.d:/etc/mysql/conf.d -v /data/mysql02/data:/var/lib/mysql -v /data/mysql02/my.cnf:/etc/mysql/my.cnf -e MYSQL_ROOT_PASSWORD=123456 -d  --restart=always --privileged=true mysql

# 参数说明
  --restart=always： 当Docker 重启时，容器会自动启动。
  --privileged=true：容器内的root拥有真正root权限，否则容器内root只是外部普通用户权限
  -v /home/mysql/conf.d/my.cnf:/etc/my.cnf：映射配置文件
  -v /home/mysql/data/:/var/lib/mysql：映射数据目录

docker inspect mysql02
# 结果
"Mounts": [
            {
                "Type": "bind",
                "Source": "/data/mysql02/log",
                "Destination": "/var/log/mysql",
                "Mode": "",
                "RW": true,
                "Propagation": "rprivate"
            },
            {
                "Type": "bind",
                "Source": "/data/mysql02/data",
                "Destination": "/var/lib/mysql",
                "Mode": "",
                "RW": true,
                "Propagation": "rprivate"
            },
            {
                "Type": "bind",
                "Source": "/data/mysql02/conf",
                "Destination": "/etc/mysql",
                "Mode": "",
                "RW": true,
                "Propagation": "rprivate"
            }
        ]

启动mysql可能会出现以下问题，这是因为MYSQL新特性secure_file_priv对读写文件的影响

docker logs -ft mysql02

mysqld: Error on realpath() on '/var/lib/mysql-files' (Error 2 - No such file or directory)
2019-09-14T09:52:51.015937Z 0 [ERROR] [MY-010095] [Server] Failed to access directory for --secure-file-priv. Please make sure that directory exists and is accessible by MySQL Server. Supplied value : /var/lib/mysql-files
2019-09-14T09:52:51.018328Z 0 [ERROR] [MY-010119] [Server] Aborting

解决方法:

  • windows下：修改my.ini 在[mysqld]内加入secure_file_priv=/var/lib/mysql
  • linux下：修改my.cnf 在[mysqld]内加入secure_file_priv=/var/lib/mysql

我们可以通过挂载的方式修改该文件，即现在宿主机创建并修改好my.cnf文件，随后挂载到容器中

[mysqld]
user=mysql
character-set-server=utf8
default_authentication_plugin=mysql_native_password
secure_file_priv=/var/lib/mysql
expire_logs_days=7
sql_mode=STRICT_TRANS_TABLES,NO_ZERO_IN_DATE,NO_ZERO_DATE,ERROR_FOR_DIVISION_BY_ZERO,NO_ENGINE_SUBSTITUTION
max_connections=1000

[client]
default-character-set=utf8

[mysql]
default-character-set=utf8
2、具名挂载和匿名挂载

匿名挂载

-v 容器内路径
docker run -d -P --name nginx01 -v /etc/nginx nginx

# 查看所有的volume的情况
docker volume ls

[root@VM-12-14-centos ~]# docker volume ls
DRIVER    VOLUME NAME
local     4040579b72a0b726cbe6448b6f22d315743d8b3f47158ca50b6e6c72c747252a
# 以上便是匿名挂载，-v只写了容器内的路径，没有写容器外的路径或卷的名称
# 于是会生成一串随机的卷名

[root@VM-12-14-centos ~]# docker volume inspect 4040579b72a0b726cbe6448b6f22d315743d8b3f47158ca50b6e6c72c747252a
[
    {
        "CreatedAt": "2022-10-30T17:34:26+08:00",
        "Driver": "local",
        "Labels": null,
        "Mountpoint": "/var/lib/docker/volumes/4040579b72a0b726cbe6448b6f22d315743d8b3f47158ca50b6e6c72c747252a/_data",
        "Name": "4040579b72a0b726cbe6448b6f22d315743d8b3f47158ca50b6e6c72c747252a",
        "Options": null,
        "Scope": "local"
    }
]
# 查看这个卷，可以看到挂载的地址位于
# "/var/lib/docker/volumes/4040579b72a0b726cbe6448b6f22d315743d8b3f47158ca50b6e6c72c747252a/_data"

具名挂载

docker run -d -P --name nginx01 -v juming:/etc/nginx nginx

[root@VM-12-14-centos ~]# docker volume ls
DRIVER    VOLUME NAME
local     juming

[root@VM-12-14-centos ~]# docker volume inspect juming
[
    {
        "CreatedAt": "2022-11-01T16:24:47+08:00",
        "Driver": "local",
        "Labels": null,
        "Mountpoint": "/var/lib/docker/volumes/juming/_data",
        "Name": "juming",
        "Options": null,
        "Scope": "local"
    }
]

观察发现如果没有设置宿主机的路径，docker内的卷都会默认在/var/lib/docker/volumes/xxxx(volume_name)/_data目录下

我们通过具名挂载可以方便地找到一个卷，大多数都会采用这样的方式

3、区分几种命令挂载方式
  • -v 容器内路径：匿名挂载
  • -v 卷名:容器内路径：具名挂载
  • -v /宿主机路径:容器内路径：指定路径挂载

扩展

通过 -v 容器内路径：ro(readonly)、rw(readwrite)改变读写权限

默认是rw，一旦设置了ro就只能在宿主机进行写操作，在容器里只能读

4、通过Dockerfile挂载

dockerfile就是用来构建docker镜像的构建文件

cd /data/volume

touch dockerfile1

vim dockerfile1

FROM centos

VOLUME ["volume01", "volume02"]

CMD echo "----end----"

CMD /bin/bash

docker build -f /data/volume/dockerfile1 -t ken/centos:1.0 .

[root@VM-12-14-centos volume]# docker run -it ken/centos:1.0 /bin/bash
[root@5fd3c2f7e99e /]# ls
bin  etc   lib    lost+found  mnt  proc  run   srv  tmp  var       volume02
dev  home  lib64  media       opt  root  sbin  sys  usr  volume01
# 可以看到出现了volume01和volume02两个目录

# 另起一个终端使用inspect查看容器也能看到
"Mounts": [
            {
                "Type": "volume",
                "Name": "c3326f0d2058d43d33597b8877b134d0b9d3ee649d4a27121306c5b4233ed0c6",
                "Source": "/var/lib/docker/volumes/c3326f0d2058d43d33597b8877b134d0b9d3ee649d4a27121306c5b4233ed0c6/_data",
                "Destination": "volume01",
                "Driver": "local",
                "Mode": "",
                "RW": true,
                "Propagation": ""
            },
            {
                "Type": "volume",
                "Name": "8160d334c70dd048bcc3176e6b0b72e68b2bda81dfe724e9a6c561e4e7324fa1",
                "Source": "/var/lib/docker/volumes/8160d334c70dd048bcc3176e6b0b72e68b2bda81dfe724e9a6c561e4e7324fa1/_data",
                "Destination": "volume02",
                "Driver": "local",
                "Mode": "",
                "RW": true,
                "Propagation": ""
            }
        ]

三、数据卷容器

如果用户需要在多个容器之间共享一些持续更新的数据，最简单的方式是使用数据卷容器。数据卷容器也是一个容器，但是它的目的是专门用来提供数据卷供其他容器挂载。

# 通过--volumes-from来挂载mysql02容器中的数据卷
docker run -d --volumes-from mysql02 --name mysql03 -e MYSQL_ROOT_PASSWORD=123456 -d --restart=always --privileged=true -p 3308:3306 mysql

# 通过inspect查看mysql03，可以看到挂载了和mysql02一样的数据卷
"Mounts": [
            {
                "Type": "bind",
                "Source": "/data/mysql02/conf.d",
                "Destination": "/etc/mysql/conf.d",
                "Mode": "",
                "RW": true,
                "Propagation": "rprivate"
            },
            {
                "Type": "bind",
                "Source": "/data/mysql02/data",
                "Destination": "/var/lib/mysql",
                "Mode": "",
                "RW": true,
                "Propagation": "rprivate"
            },
            {
                "Type": "bind",
                "Source": "/data/mysql02/my.cnf",
                "Destination": "/etc/mysql/my.cnf",
                "Mode": "",
                "RW": true,
                "Propagation": "rprivate"
            }
        ]

可以多次使用–volumes-from参数来从多个容器挂载多个数据卷。还可以从其他已经挂载了容器卷的容器来挂载数据卷。

使用–volumes-from参数所挂载数据卷的容器自身并不需要保持在运行状态。

如果删除了挂载的容器（mysql02），数据卷并不会被自动删除。如果要删除一个数据卷，必须在删除最后一个还挂载着它的容器时显式使用docker rm -v命令来指定同时删除关联的容器。

得过且过的勇者y
关注
专栏目录
Docker案例分析：使用Docker进行数据同步
AI天才研究院
02-20 131
1. 背景介绍 1.1 数据同步的重要性 在当今这个数据驱动的时代，数据同步已经成为了企业和个人日常工作中不可或缺的一部分。数据同步可以确保在多个设备、系统或应用程序之间共享、更新和访问相同的数据。这对于提高生产力、保持数据一致性和实现数据备份等方面具有重要意义。
Docker 容器数据卷
Ctrl_kun的博客
03-29 863
Docker容器数据卷
Docker使用数据卷实现数据同步以及MYSQL的数据持久化和数据同步
qq_55946937的博客
06-14 647
（2）重新下载其他的mysql镜像并运行，文件同步地址和之前数据库一致，两个数据库之间实现数据同步。（2）本地连接mysql并新建数据库，在宿柱机的对应的目录可以看到新增的数据库文件夹。在宿主机绑定目录创建或修改文件或目录，容器目录出现对应的创建和修改，反之一样。（1）如果是云服务器，开启映射的端口（3310）的TCP权限。容器停止运行之后宿主机创建或修改文件，容器目录出现对应的创建和修改。（1）删除docker中的版本后持久化的数据文件还在。
推荐文章：提升Docker同步效率的利器 —— docker-rsync
最新发布
gitblog_01060的博客
08-30 720
推荐文章：提升Docker同步效率的利器 —— docker-rsync docker-rsyncDocker + rsync项目地址:https://gitcode.com/gh_mirrors/do/docker-rsync 在追求高效开发与部署的今天，数据同步一直是Docker用户的心头大患。boot2docker vboxsf虽然提供了便利，但其性能问题常常让开发者感到头疼。正当此时，一...
Docker Mysql数据库主从同步配置详细
tongfj的博客
10-26 739
mysql主从原理、配置以及配置中常见问题
Docker两容器间通过数据卷进行数据同步
m0_64284147的博客
09-02 337
Docker两容器间通过数据卷进行数据同步。
docker数据卷
zhenxue9949的博客
09-04 139
一、数据卷 不指定数主机的位置： 通用格式：-v /data docker run -it –name volume-test1 -h nginx -v /data nginx //挂载了一个data的目录，-h指定主机名称 docker inspect -f {{.Volume}} volume-test1 //查看我们上面在容器中所挂载的/data目录在宿...
Docker容器数据卷技术详解：实现数据持久化和同步
Docker容器数据卷是一种实现数据持久化和同步的技术，旨在解决容器删除后数据丢失的问题。下面我们将详细介绍Docker容器数据卷的原理和使用方法。 **什么是容器数据卷？** 容器数据卷是一种将容器目录挂载到主机...
(六) Docker容器数据卷
小怪的博客
12-07 1514
容器卷记得加入 Docker挂载主机目录访问如果出现错误信息：解决办法：在挂载目录后多加一个参数即可就是提高容器的权限，可以挂载宿主机目录 如果是CentOS7安全模块会比之前系统版本加强，不安全的会先禁止，所以目录挂载的情况被默认为不安全的行为,在SELinux里面挂载目录被禁止掉了，如果要开启，我们一般使用–privileged=true命令，扩大容器的权限解决挂载目录没有权限的问题，也即 使用该参数，container内的root拥有真正的root权限，否则，container内的root只是外部的一
Docker 数据卷,数据卷容器详细介绍
09-30
总结来说，Docker 数据卷和数据卷容器是 Docker 中实现数据持久化和跨容器共享的重要手段，它们提供了灵活且可靠的存储解决方案，使得容器化应用的数据管理变得更为高效和便捷。在实际使用中，根据具体需求选择合适...
Docker容器数据卷，详细讲解与操作
qq_52252193的博客
04-25 512
Docker 挂载主机目录访问如果出现 cannot open directory .: Permission denied 解决办法：在挂载目录后多加一个--privileged=true参数即可 如果是CentOS7安全模块会比之前系统版本加强，不安全的会先禁止，所以目录挂载的情况被默认为不安全的行为， 在SELinux里面挂载目录被禁止掉了额，如果要开启，我们一般使用--privileged=true命令，扩大容器的权限解决挂载目录没有权限的问题，也即 使用该参数，container内的roo...
Docker_volume（容器和宿主同步数据）
热门推荐
编程知识分享，主打前端
11-01 3万+
数据卷volumevolume创建 volume docker容器产生的数据，不commit生成新镜像，删除容器也会删除数据。 作用：数据共享（继承）、数据长存。 创建
docker之MySQL同步数据
qq_48440248的博客
03-14 2086
实验的过程分为4步： 获取mysql镜像 运行一个mysql容器 测试连接mysql 验证 第一步先获取镜像，版本选择了MySQL5.7 [root@localhost ~]# docker pull mysql:5.7 [root@localhost ~]# docker images |grep mysql mysql 5.7 c20987f18b13 2 months ago 448MB 第二步运行MySQL容器 [root@local
docker入门（十二）：容器间数据同步
Liu Feng's Blog
08-21 1269
文章目录容器间的数据卷（1）什么时候用容器间的数据卷？（2）父容器共享数据原理 容器间的数据卷 （1）什么时候用容器间的数据卷？   如果有一些持续更新的数据需要在容器之间共享，需要创建父容器进行数据卷操作。父容器专门用来提供数据卷供其他容器挂载 （2）父容器共享数据原理 启动之前创建好的一个容器 # 启动之前创建的一个ubuntu01的容器 test@P340:/$ sudo docker start ubuntu01 ubuntu01 test@P340:/$ sudo docker ps CONTAI
初识Dockerfile与实现容器间的数据同步
码出精彩
02-03 404
初识Dockerfile与实现容器间的数据同步1、初识Dockerfile2、实现容器间的数据同步 1、初识Dockerfile Dockerfile简单来说就是用来构建docker镜像的构建文件，命令脚本。通过这个脚本可以生成镜像，镜像是一层一层的，脚本一个个的命令，每个命令都是一层。 一个简单的dockerfile文件 # 创建一个dockerfile文件，名字可以随机 建议Dockerfile # 文件中的内容 指令（大写） 参数 FROM centos VOLUME ["volume01","vo
Docker学习(12)——MySQL数据同步
www_dong的博客
10-05 183
（1）获取MySQL镜像 docker pull mysql （2）运行容器 [root@192 mysql]# docker run -d -p 3310:3306 -v /home/docker/mysql/conf:/etc/mysql/conf.d -v /home/docker/mysql/data:/var/lib/mysql -e MYSQL_ROOT_PASSWORD=123456 --name mysql1 mysql 说明： -d 后台运行 -p 3310:3306 端
docker 版 mysql 主从同步
佐杰的博客
05-18 867
【代码】docker 版 mysql 主从同步。
基于Docker的数据库和文件同步的服务部署
XiaoBaiDong的博客
03-29 886
数据同步
为我的博客网站数据库使用Docker实现MySQL主从同步
肓己CSDN
07-29 987
前言 个人博客使用了阿里云的服务器，此文是笔者实现WordPress+Docker+MySQL主从同步架构的记录。 环境 Docker version 1.13.1 LNMP： - 阿里云centos 7.3 - nginx version: nginx/1.12.2 - mysql5.6（Docker镜像） - PHP 5.4.16 WordPress: - wordpres...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

得过且过的勇者y

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值