使用docker-compose 搭建mongo多副本

已于 2024-06-05 12:24:58 修改
阅读量1k 收藏 18
点赞数 17
文章标签： docker 容器 运维 mongodb
于 2024-06-05 09:02:23 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_40315096/article/details/139442212
版权

MongoDB副本集（Replica Set）是有自动故障恢复功能的主从集群，有一个Primary节点和一个或者多个Secondary节点组成。副本集没有固定的主节点，当主节点发生故障时，整个集群会选举一个主节点 为系统提供服务以保证系统的高可用。

副本集拥有三种节点:主节点、从节点、仲裁节点
1.主节点 负责处理客户端请求,读、写数据。
2.从节点 从主节点中复制数据，并可以接收读请求。在主节点故障时可通过投票选举出新的主节点。
3.仲裁节点 不持有数据副本，只参与投票过程，决定哪个节点成为主节点。

本文使用mongo5.0.8作为样例

1.docker-compose.yaml

这里先直接给出单个mongo 的docker-compose.yaml

version: '3.0'
services:
  mongo1:
    hostname: mongo1
    image: mongo:5.0.8
    restart: unless-stopped
    container_name: mongodb1
    command: --replSet app --bind_ip_all --keyFile /data/mongodb/keyFile
    environment:
      TZ: 'Asia/Shanghai'
      MONGO_INITDB_ROOT_USERNAME: 'admin'
      MONGO_INITDB_ROOT_PASSWORD: 'password'
    ports:
      - 27020:27017
    volumes:
      - ./data1:/data/db
      - ./keyFile:/data/mongodb/keyFile
    networks:
      - bridge_network
  mongo2:
    hostname: mongo2
    image: mongo:5.0.8
    restart: unless-stopped
    container_name: mongodb2
    command: --replSet app --bind_ip_all --keyFile /data/mongodb/keyFile
    environment:
      TZ: 'Asia/Shanghai'
      MONGO_INITDB_ROOT_USERNAME: 'admin'
      MONGO_INITDB_ROOT_PASSWORD: 'password'
    ports:
      - 27018:27017
    volumes:
      - ./data2:/data/db
      - ./keyFile:/data/mongodb/keyFile
    networks:
      - bridge_network
  mongo3:
    hostname: mongo3
    image: mongo:5.0.8
    restart: unless-stopped
    container_name: mongodb3
    command: --replSet app --bind_ip_all --keyFile /data/mongodb/keyFile
    environment:
      TZ: 'Asia/Shanghai'
      MONGO_INITDB_ROOT_USERNAME: 'admin'
      MONGO_INITDB_ROOT_PASSWORD: 'password'
    ports:
      - 27019:27017
    volumes:
      - ./data3:/data/db
      - ./keyFile:/data/mongodb/keyFile
    networks:
      - bridge_network
networks:
  bridge_network:
    driver: bridge

这里可以选择在一台机器上启动3个容器，也可以在不同的机器上启动。本例用上述文件分别在IP为10.0.1.11(主)、10.0.1.31(从)、10.0.1.32(从)三台机器上启动。

在10.0.1.11执行docker compose up -d mongo1
在10.0.1.31执行docker compose up -d mongo2
在10.0.1.32执行docker compose up -d mongo3

这里 docker compose up -d 后的 mongo1、mongo2、mongo3是指只启动yaml文件中的一个服务。如果将yaml文件拆分成不同的文件分别在对应的机器里启动就不需要在命令后面加服务名称了。

需要注意：
组成副本的每一台机器的keyFile文件必须一样！！！mongodb实例只有拥有正确的keyfile才可以加入副本集。keyFile文件的具体操作方法可以参考https://blog.csdn.net/qq_40315096/article/details/124814101

2.容器启动后

在容器启动后，我们使用docker exec 命令进入作为主节点的容器,进入mongo shell

mongo -u admin --authenticationDatabase admin

初始化mongo 副本集

rs.initiate({
  _id: "app",
  members: [
    { _id: 0, host: "10.0.1.11:27020" },
    { _id: 1, host: "10.0.1.31:27018" },
    { _id: 2, host: "10.0.1.32:27019" }
  ]
})

注意，当初我在初始化时，误以为可以直接使用rs.initiate()无参的初始化方法，然后再依次使用rs.add(‘ip:port’)将剩余的节点加入副本集。但是这是错误的，因为在初始化时，如果使用无参的初始化方法，mongo会直接获取宿主机(这时对于mongo来说宿主机是docker容器)的hostname+端口组成mongo的host并写入配置，但是由于mongo的宿主机其实是容器，所以会获取到容器的hostname以及mongo在容器里的端口。
在这里插入图片描述
显然这个当多个不同机器的mongo副本相互通信时，这个host是无效的。

所以在初始化时最好直接指定好具体的机器。

在这里插入图片描述
当初始化完成以后可以使用rs.status()查看副本集状态
截取部分内容

"members" : [
		{
			"_id" : 0,
			"name" : "10.0.1.11:27020",
			"health" : 1,
			"state" : 1,
			"stateStr" : "PRIMARY",
			"uptime" : 2299,
			"optime" : {
				"ts" : Timestamp(1717560117, 1),
				"t" : NumberLong(1)
			},
			"optimeDate" : ISODate("2024-06-05T04:01:57Z"),
			"lastAppliedWallTime" : ISODate("2024-06-05T04:01:57.808Z"),
			"lastDurableWallTime" : ISODate("2024-06-05T04:01:57.808Z"),
			"syncSourceHost" : "",
			"syncSourceId" : -1,
			"infoMessage" : "",
			"electionTime" : Timestamp(1717559887, 1),
			"electionDate" : ISODate("2024-06-05T03:58:07Z"),
			"configVersion" : 1,
			"configTerm" : 1,
			"self" : true,
			"lastHeartbeatMessage" : ""
		},
		{
			"_id" : 1,
			"name" : "10.0.1.31:27018",
			"health" : 1,
			"state" : 2,
			"stateStr" : "SECONDARY",
			"uptime" : 249,
			"optime" : {
				"ts" : Timestamp(1717560117, 1),
				"t" : NumberLong(1)
			},
			"optimeDurable" : {
				"ts" : Timestamp(1717560117, 1),
				"t" : NumberLong(1)
			},
			"optimeDate" : ISODate("2024-06-05T04:01:57Z"),
			"optimeDurableDate" : ISODate("2024-06-05T04:01:57Z"),
			"lastAppliedWallTime" : ISODate("2024-06-05T04:01:57.808Z"),
			"lastDurableWallTime" : ISODate("2024-06-05T04:01:57.808Z"),
			"lastHeartbeat" : ISODate("2024-06-05T04:02:05.988Z"),
			"lastHeartbeatRecv" : ISODate("2024-06-05T04:02:05.581Z"),
			"pingMs" : NumberLong(1),
			"lastHeartbeatMessage" : "",
			"syncSourceHost" : "10.0.1.11:27020",
			"syncSourceId" : 0,
			"infoMessage" : "",
			"configVersion" : 1,
			"configTerm" : 1
		},
		{
			"_id" : 2,
			"name" : "10.0.1.32:27019",
			"health" : 1,
			"state" : 2,
			"stateStr" : "SECONDARY",
			"uptime" : 249,
			"optime" : {
				"ts" : Timestamp(1717560117, 1),
				"t" : NumberLong(1)
			},
			"optimeDurable" : {
				"ts" : Timestamp(1717560117, 1),
				"t" : NumberLong(1)
			},
			"optimeDate" : ISODate("2024-06-05T04:01:57Z"),
			"optimeDurableDate" : ISODate("2024-06-05T04:01:57Z"),
			"lastAppliedWallTime" : ISODate("2024-06-05T04:01:57.808Z"),
			"lastDurableWallTime" : ISODate("2024-06-05T04:01:57.808Z"),
			"lastHeartbeat" : ISODate("2024-06-05T04:02:05.988Z"),
			"lastHeartbeatRecv" : ISODate("2024-06-05T04:02:05.629Z"),
			"pingMs" : NumberLong(1),
			"lastHeartbeatMessage" : "",
			"syncSourceHost" : "10.0.1.11:27020",
			"syncSourceId" : 0,
			"infoMessage" : "",
			"configVersion" : 1,
			"configTerm" : 1
		}
	],

在这里插入图片描述
在这里插入图片描述
这里可以看到执行初始化的机器为主节点，剩下的为从节点

关于stateStr字段的各个含义：

STARTUP：成员正在启动。
PRIMARY：成员是主节点。
SECONDARY：成员是次节点。
RECOVERING：成员正在恢复。
ARBITER：成员是仲裁节点。
DOWN：成员无法与大多数节点通信。
UNKNOWN：成员的状态未知。
ROLLBACK：成员正在进行回滚操作。
REMOVED：成员已经被副本集移除。

最后如果有后续需要加入的新节点可以使用 rs.add(‘ip:port’)加入。如果需要加入仲裁节点(不推荐)
可以使用rs.add(‘ip:port’，true)加入

关于节点的数量
mongodb官方说当节点超过2个时，推荐副本集成员为奇数个成员，而不使用仲裁节点。所以在实际运用中尽可能的保证奇数个节点而不使用仲裁节点。如果迫不得已正常主从节点总数为偶数，这时仲裁节点就可以加入副本集（仲裁节点不参与存储等业务，只参与投票，所以仲裁节点对于性能的要求很小，加一个仲裁节点的难度不会很大），这样拥有投票权的节点总数又为奇数了。
具体为什么需要奇数个节点，这需要投票选举的算法以及实际部署的情况来解释（脑裂问题）。

502_Bad_gateway
关注
通过docker-compose快速搭建mongodb副本集
0x8g1T9E-
03-27 7292
转https://monkeywie.github.io/2020/03/10/mongodb-replica-set/?utm_source=tuicool&utm_medium=referral 前言 mongoDB 提供的副本集是将数据同步至多个节点，提供了数据冗余备份和节点故障的情况下可以自动转移的高可用特性，架构图如下： 有时候需要要在本地搭建一套 mongoDB 副本...
mongodb-cluster-docker-compose：演示一个简单的分片的Mongo集群，并使用docker compose复制
02-04
带有Docker Compose的演示Mongo分片集群 PSS样式（小学-中学-中学） 需要PSA吗？ 检查 警告（Windows和OS X） Windows和OS X上的默认Docker设置使用VirtualBox VM托管Docker守护程序。 不幸的是，VirtualBox用于在...
使用docker-compose部署mongodb集群（一主两从的副本集模式）
天草二十六
05-04 2487
进入主节点，初始化副本集，把其他两个从节点加入到集群中。新增admin用户，密码为admin。主节点暴露端口号，见下映射关系。默认是不用账户和密码的授权。部署成功，容器列表见下。
mongo副本集本地部署
王小工小工历程
05-15 1055
mongodb 副本集（Replica Set） 主节点（primary）跟副本节点（Secondaries）。主节点只能有一个，写操作请求都在主节点上面处理。副本节点可以有多个，通过同步主节点的操作日志（oplog）来备份主节点数据。主节点挂掉后，有选举权限的副本节点会自动发起选举，并从中选举出新的主节点。
docker-compose安装MongoDB 7.0.12
最新发布
wnfff的博客
08-16 496
docker-compose安装MongoDB 7.0.12
docker-compose部署多分片多副本clickhouse本地环境
数据猿+的博客
06-19 2888
一、部署环境 1.ck版本：20.4.2.9 2.系统：MacOS 3.zookeeper版本：3.5 4.docker：19.03.8 二、配置 1.docker-compose.yaml version: '2' services: zookeeper-ck2: image: zookeeper:3.5 restart: always hostname: zookeeper-ck2 container_name: zookeeper-ck2
Docker 系列之 docker-compose 部署 MongoDB 三副本集群（三节点）
火火火华的博客
08-09 1307
本文是通过三台机器部署的三个mongo副本组成的集群，每个节点部署一个mongo服务，通过使用docker-compose快速构建mongo三副本集群，数据存储采用绑定nfs进行存储
Docker Compose部署Mongodb副本集群教程
JJW1002的博客
02-29 2146
MongoDB副本集（Replica Set）是一种MongoDB数据库的高可用性架构，它包含多个MongoDB服务器实例。副本集提供了数据冗余和故障转移机制，以确保在其中一个节点发生故障时，数据库系统仍然能够继续提供服务。1、副本集：一个副本集就是一组MongoDB实例组成的集群，由一个主（Primary）服务器和多个备份（Secondary）服务器构成2、主节点（master）：主节点接收所有写入操作。主节点将对其数据集所做的所有更改记录到其oplog。
docker-compose mongodb 副本集
nsa65223的专栏
07-10 1031
mongodb 使用 keyFile 进行认证，副本集群中的每个节点的 mongodb 使用 keyFile 的内容作为认证其他成员的共享密码。我们运行一下 demo 代码中的添加员工的测试代码，然后就可以在集群连接下和各个节点的连接下看到新创建的 mytest 数据库，以及其下面的 tb_employee 表和数据内容，并且都是一致的。执行 demo 代码中的修改测试代码，然后再启动刚才停掉的容器，最后发现重启后的节点变成了从节点。本篇博客的演示中，没有去设置仲裁节点，3 个节点都保留数据副本。
win10系统docker安装Mongodb
sayoko06的博客
11-09 789
使用docker-compose，由于我使用的是Docker Desktop，默认安装了docker-compose，否则需要自己安装，可以用下面命令检查是否安装了docker-compose docker-compose -v 这里就不介绍安装，直接上docker-compose.yml代码 version: '3' services: mongo-db: image: mongo:latest container_name: mongo-db restart: al
docker-compose部署mongodb副本集（无需初始化）
weixin_55905026的博客
03-08 608
部署两节点 两副本，两仲裁。 自动生成副本集群。
docker-compose-mongo
05-31
"docker-compose-mongo"这个项目显然关注的是使用Docker Compose来部署MongoDB数据库服务。MongoDB是一种流行的、高性能的、无模式的、文档型的NoSQL数据库，广泛应用于大数据存储和处理。 在JavaScript领域，...
localmongo:使用docker-compose开发的本地mongo复制集
05-10
运行mongo：4.2-bionic的本地mongo复制集，用于使用docker-compose开发。 设置 切换到所需版本的目录，然后运行： docker-compose up 这将启动mongodb的3个容器，运行一个名为rs0的副本集。 如果要切换版本，请...
docker-compose构建mongo主从镜像包
01-09
docker-compose构建mongo主从镜像包
pritunl-docker:用于运行Pritunl的Dockerfile和docker-compose配置
05-15
包含的docker-compose.yml带来mongo（对其进行编辑以不暴露主机上的mongo端口） 用法 git clone https://github.com/cloudkite-io/pritunl-docker cd pritunl-docker docker-compose up --build 管理控制台现在位于...
docker-compose部署mongodb副本集群
qq_14886109的博客
02-13 1074
docker-compose安装部署mongodb副本集群
Docker-compose MongoDB集群部署
责人者远，责己者半，不责者达
01-02 1336
MongoDB是一个介于关系数据库和非关系数据库之间的产品，是非关系数据库当中功能最丰富，最像关系数据库的。它支持的数据结构非常松散，是类似json的bson格式，因此可以存储比较复杂的数据类型。Mongo最大的特点是它支持的查询语言非常强大，其语法有点类似于面向对象的查询语言，几乎可以实现类似关系数据库单表查询的绝大部分功能，而且还支持对数据建立索引。MongoDB是一个基于分布式文件存储的数据库。旨在为WEB应用提供可扩展的高性能数据存储解决方案。
docker+docker-compose快速搭建mongo
weixin_45607135的博客
08-29 2060
docker+docker-compose快速搭建mongo数据库
使用docker-compose 搭建mongo单节点与副本集
weixin_55625082的博客
04-04 1104
注：确认已经已经关闭防火墙和selinux和已安装docker。
docker-compose部署skywalking集群
06-13
好的，我可以为您提供一些基本的步骤，但在开始之前，请确保您已经安装了docker和docker-compose。 1. 首先，您需要下载SkyWalking的docker-compose文件。您可以在SkyWalking的GitHub页面上找到它。 2. 下载后，您需要根据您的需求修改docker-compose文件。您需要设置环境变量，例如SW_STORAGE，SW_CLUSTER和SW_WEBAPP，以便SkyWalking正确地运行。您还可以根据需要更改SkyWalking的版本号。 3. 在修改docker-compose文件后，您可以使用以下命令启动SkyWalking集群： ``` docker-compose up -d ``` 4. 如果您想要扩展SkyWalking集群，则需要增加更多的节点。您可以使用以下命令来添加新节点： ``` docker-compose scale oap=<number_of_nodes> collector=<number_of_nodes> ``` 5. 最后，您可以使用以下命令来停止SkyWalking集群： ``` docker-compose down ``` 希望这些步骤可以帮助您成功部署SkyWalking集群。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值