MongoDB第二话 -- MongoDB高可用集群实现

已于 2022-06-29 17:15:31 修改
阅读量528 收藏
点赞数
分类专栏： 数据库DB 分布式架构 springboot 文章标签： mongodb 数据库 分布式集群
于 2022-06-29 11:07:12 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_35551875/article/details/125429009
版权

本文主要记录MongoDB集群的搭建

坏境准备：liunx centos7，docker-compose，镜像mongo:4.2.21。
一主一从一仲裁，在一台机实现了

项目Value
0.221:27017节点1
0.221:27018节点2
0.221:27019仲裁节点

1. docker-compose.yaml

version: '3.7'
services:
  mongo01:
    image: mongo:4.2.21
    container_name: mongo01
    ports:
    - "27017:27017"
    environment:
    - TZ=Asia/Shanghai
    volumes:
    - ./rs1:/data/db
    #--replSet newset 定义副本集名称 可在路径后面使用?replicaSet=newset
    command: mongod --dbpath /data/db --replSet newset --oplogSize 128
    networks:
    - my-net
  mongo02:
    image: mongo:4.2.21
    container_name: mongo02
    ports:
    - "27018:27017"
    environment:
    - TZ=Asia/Shanghai
    volumes:
    - ./rs2:/data/db
    command: mongod --dbpath /data/db --replSet newset  --oplogSize 128
    networks:
    - my-net
  myarbiter:
    image: mongo:4.2.21
    container_name: myarbiter
    ports:
    - "27019:27017"
    environment:
    - TZ=Asia/Shanghai
    volumes:
    - ./rs3:/data/db
    command: mongod --dbpath /data/db --replSet newset  --oplogSize 128
    networks:
    - my-net
  mongo-console:
    image: mongo-express
    container_name: mongo-console
    ports:
    - "8081:8081"
    environment:
    #控制台 需要集群生效后才能连接成功 只能连接master 可单独抽离出来
    - ME_CONFIG_MONGODB_SERVER=mongo01
#    - ME_CONFIG_BASICAUTH_USERNAME=admin
#    - ME_CONFIG_BASICAUTH_PASSWORD=admin
    - TZ=Asia/Shanghai
    networks:
    - my-net
networks:
  #新增的网络 内部服务名调用
  my-net:
    external: true

2.启动容器

[root@m mongo-cluster]# docker ps -a
CONTAINER ID        IMAGE               COMMAND                  CREATED             STATUS              PORTS                      NAMES
7588aac35621        mongo:4.2.21        "docker-entrypoint.s…"   15 minutes ago      Up 8 minutes        0.0.0.0:27017->27017/tcp   mongo01
5adca1bbfa3d        mongo:4.2.21        "docker-entrypoint.s…"   15 minutes ago      Up 15 minutes       0.0.0.0:27019->27017/tcp   myarbiter
5384dac6d37a        mongo:4.2.21        "docker-entrypoint.s…"   15 minutes ago      Up 15 minutes       0.0.0.0:27018->27017/tcp   mongo02
5df1b5d9af4f        mongo-express       "tini -- /docker-ent…"   15 minutes ago      Up 8 minutes        0.0.0.0:8081->8081/tcp     mongo-console

3.初始化集群

#进入任意一个容器内部 执行mongo命令
[root@m mongo-cluster]# docker exec -it mongo02 mongo
MongoDB shell version v4.2.21
#执行集群初始配置,如果需要程序连接，需要填宿主机IP
>rs.initiate({_id:"newset",members:[{_id:0,host:"192.168.0.221:27017"},{_id:1,host:"192.168.0.221:27018"},{_id:2,host:"192.168.0.221:27019",arbiterOnly:true}]})
{
	"operationTime" : Timestamp(1656417751, 1),
	"ok" : 0,
	"errmsg" : "already initialized",
	"code" : 23,
	"codeName" : "AlreadyInitialized",
	"$clusterTime" : {
		"clusterTime" : Timestamp(1656417751, 1),
		"signature" : {
			"hash" : BinData(0,"AAAAAAAAAAAAAAAAAAAAAAAAAAA="),
			"keyId" : NumberLong(0)
		}
	}
}
newset:SECONDARY>

_id：对应的replSet 名称
host：如果需要程序连接，需要填宿主机IP
arbiterOnly:true 表示该节点为仲裁节点

4.查看集群状态

newset:SECONDARY> rs.status()
#找到members节点信息
"members" : [
		{
			"_id" : 0,
			"name" : "192.168.0.221:27017",
			"health" : 1,
			"state" : 1,
			#集群master
			"stateStr" : "PRIMARY",
			"uptime" : 202,
			"optime" : {
				"ts" : Timestamp(1656417761, 6),
				"t" : NumberLong(1)
			},
			"optimeDate" : ISODate("2022-06-28T12:02:41Z"),
			"syncingTo" : "",
			"syncSourceHost" : "",
			"syncSourceId" : -1,
			"infoMessage" : "could not find member to sync from",
			"electionTime" : Timestamp(1656417761, 1),
			"electionDate" : ISODate("2022-06-28T12:02:41Z"),
			"configVersion" : 1,
			"self" : true,
			"lastHeartbeatMessage" : ""
		},
		{
			"_id" : 1,
			"name" : "192.168.0.221:27018",
			"health" : 1,
			"state" : 2,
			#集群slave
			"stateStr" : "SECONDARY",
			"uptime" : 10,
			"optime" : {
				"ts" : Timestamp(1656417751, 1),
				"t" : NumberLong(-1)
			},
			"optimeDurable" : {
				"ts" : Timestamp(1656417751, 1),
				"t" : NumberLong(-1)
			},
			"optimeDate" : ISODate("2022-06-28T12:02:31Z"),
			"optimeDurableDate" : ISODate("2022-06-28T12:02:31Z"),
			"lastHeartbeat" : ISODate("2022-06-28T12:02:41.778Z"),
			"lastHeartbeatRecv" : ISODate("2022-06-28T12:02:41.434Z"),
			"pingMs" : NumberLong(0),
			"lastHeartbeatMessage" : "",
			"syncingTo" : "",
			"syncSourceHost" : "",
			"syncSourceId" : -1,
			"infoMessage" : "",
			"configVersion" : 1
		},
		{
			"_id" : 2,
			"name" : "192.168.0.221:27019",
			"health" : 1,
			"state" : 7,
			#集群仲裁
			"stateStr" : "ARBITER",
			"uptime" : 10,
			"lastHeartbeat" : ISODate("2022-06-28T12:02:41.778Z"),
			"lastHeartbeatRecv" : ISODate("2022-06-28T12:02:41.704Z"),
			"pingMs" : NumberLong(0),
			"lastHeartbeatMessage" : "",
			"syncingTo" : "",
			"syncSourceHost" : "",
			"syncSourceId" : -1,
			"infoMessage" : "",
			"configVersion" : 1
		}
	],

5.模拟master节点挂掉

停掉master节点，进入slave节点容器中查看状态

"members" : [
		{
			"_id" : 0,
			"name" : "192.168.0.221:27017",
			"health" : 0,
			"state" : 8,
			"stateStr" : "(not reachable/healthy)",
			"uptime" : 0,
			"optime" : {
				"ts" : Timestamp(0, 0),
				"t" : NumberLong(-1)
			},
			"optimeDurable" : {
				"ts" : Timestamp(0, 0),
				"t" : NumberLong(-1)
			},
			"optimeDate" : ISODate("1970-01-01T00:00:00Z"),
			"optimeDurableDate" : ISODate("1970-01-01T00:00:00Z"),
			"lastHeartbeat" : ISODate("2022-06-28T12:05:49.005Z"),
			"lastHeartbeatRecv" : ISODate("2022-06-28T12:05:30.416Z"),
			"pingMs" : NumberLong(0),
			"lastHeartbeatMessage" : "Error connecting to 192.168.0.221:27017 :: caused by :: Connection refused",
			"syncingTo" : "",
			"syncSourceHost" : "",
			"syncSourceId" : -1,
			"infoMessage" : "",
			"configVersion" : -1
		},
		{
			"_id" : 1,
			"name" : "192.168.0.221:27018",
			"health" : 1,
			"state" : 1,
			#原来的slave节点已经变更为master了
			"stateStr" : "PRIMARY",
			"uptime" : 390,
			"optime" : {
				"ts" : Timestamp(1656417940, 2),
				"t" : NumberLong(3)
			},
			"optimeDate" : ISODate("2022-06-28T12:05:40Z"),
			"syncingTo" : "",
			"syncSourceHost" : "",
			"syncSourceId" : -1,
			"infoMessage" : "could not find member to sync from",
			"electionTime" : Timestamp(1656417940, 1),
			"electionDate" : ISODate("2022-06-28T12:05:40Z"),
			"configVersion" : 1,
			"self" : true,
			"lastHeartbeatMessage" : ""
		},
		{
			"_id" : 2,
			"name" : "192.168.0.221:27019",
			"health" : 1,
			"state" : 7,
			"stateStr" : "ARBITER",
			"uptime" : 197,
			"lastHeartbeat" : ISODate("2022-06-28T12:05:49.006Z"),
			"lastHeartbeatRecv" : ISODate("2022-06-28T12:05:48.204Z"),
			"pingMs" : NumberLong(0),
			"lastHeartbeatMessage" : "",
			"syncingTo" : "",
			"syncSourceHost" : "",
			"syncSourceId" : -1,
			"infoMessage" : "",
			"configVersion" : 1
		}
	],

可以看到原来的slave节点已经变成了PRIMARY主节点

6.mongo-express控制台

  1. 连接需要注意的点
    environment:
    #不用带端口 直接走容器名称
    - ME_CONFIG_MONGODB_SERVER=mongo01
  1. 集群未初始化或者集群master已变更，控制台会报下面错误
(node:6) UnhandledPromiseRejectionWarning: MongoError: not master and slaveOk=false

需要确定master节点后然后重启控制台

7.springboot中集群配置

spring:
  data:
    mongodb:
      #有密码连接 账号密码包含特殊字符的需要用URLEncoder编码 库名必填
      #uri: mongodb://admin:123456@192.168.0.221:27017/imgdb
      #集群方式 副本集replicaSet可带可不带
      uri: mongodb://192.168.0.221:27017,192.168.0.221:27018/imgdb?replicaSet=newset
#      uri: mongodb://192.168.0.221:27017/imgdb

以上就是本章的全部内容了。

上一篇：MongoDB第一话 – Docker安装MongoDB以及Springboot集成MongoDB
下一篇：JVM第一话 – JVM入门详解以及运行时数据区分析

书山有路勤为径，学海无涯苦作舟

有头发的程序猿!
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
docker yml文件 启动mysql+mongo+mongo-express
qq_40896725的博客
06-06 1408
首先查看mongo-express的docker文档，熟悉参数很重要： Name Default Description ME_CONFIG_BASICAUTH_USERNAME ‘’ mongo-express web username ME_CONFIG_BASICAUTH_PASSWORD ‘’ mongo-express web password ME_CONFIG...
搭建高可用的MongoDB集群
03-03
高性能、易扩展一直是MongoDB的立足之本，同时规范的文档和接口更让其深受用户喜爱，这一点从分析DB-Engines的得分结果不难看出——仅仅1年时间，MongoDB就完成了第7名到第五名的提升，得分就从124分上升至214分，...
MongoDB集群搭建与管理（集群搭建 分片 扩缩容 搭建高可用集群）
m0_46690280的博客
08-14 1269
MongoDB集群搭建MongoDB集群搭建MongoDB集群搭建MongoDB集群简介Mongo分片高可用集群搭建整体架构基础环境准备搭建ConfigServer副本集搭建Shard分片组搭建MongosDocker-compose方式搭建启动服务 MongoDB集群搭建 MongoDB集群搭建 MongoDB集群简介 mongodb 集群搭建的方式有三种： 主从备份（Master - Slave）模式，或者叫主从复制模式。 副本集（Replica Set）模式 分片（Sharding）模式 其中，第一
MongoDB 3.4 高可用集群搭建（四）—— 分片
weixin_34388207的博客
02-10 509
按照上一节中《MongoDB 3.4 高可用集群搭建（三）深入副本集内部机制》搭建后还有两个问题没有解决： 从节点每个上面的数据都是对数据库全量拷贝，从节点压力会不会过大？ 数据压力大到机器支撑不了的时候能否做到自动扩展？ 在系统早期，数据量还小的时候不会引起太大的问题，但是随着数据量持续增多，后续迟早会出现一台机器硬件瓶颈问题的。而mongodb主打的就是海量数据架构，他不能解...
mongodb高可用集群的搭建
MrQueens的博客
11-28 1105
shard，mongodb的分片集合，将一个shard部署在不同的机器上。当一台机器宕机后，可以从另一台机器上获取数据 config servers 用于给router分配合适的shard.
mongodb 高可用架构
u014039526的博客
03-21 434
mongodb高可用架构方案
MongoDB搭建高可用集群的完整步骤（3个分片+3个副本）
12-16
配置脚本以及目录下载：点我下载 一、规划好端口ip  架构图如下，任意抽取每个副本集中的一个分片（非仲裁节点）可以组成一份完整的数据。  1.... share1 10.0.0.7:30011:/data/share... 第二个副本集rs2 share1 10.
第二课：mongodb企业级应用管理1
08-08
2.mapRedurce 聚合mapRedurce 说明： 为什么需要 MapReduce 3.复制集群选举操作为了保证高可用，在集群当中如果主节点挂掉后
MongoDB实战第二版笔记（14）第十三章笔记（系列终）
01-09
最小配置有2个片，只有一个片会增加额外压力而且无法利用分片优势，每个分片应是可复制集，并且有3个配置服务器确保没有单点故障，两个mongos路由进程保证高可用性。当想要捆绑廉价服务器提升容量时使用分片集群。 ...
MongoDB高可用方案
zhanghe_zht的博客
04-20 249
2、Replica Set 副本集模式。1、Master-Slave 模式。3、Sharding 模式。
搭建高可用mongodb集群（一）——配置mongodb
02-21
近年来，NoSQL数据库已得到了长足的发展，更成为了许多机构追求性能的第一选择，而在这些技术堆栈中，MongoDB无疑是人气最高的一个，这里为大家分享高可用MongoDB集群的搭建。传统的关系数据库具有不错的性能及稳定性，同时，久经历史考验，许多优秀的数据库沉淀了下来，比如MySQL。然而随着数据体积的爆发性增长，数据类型的增多，许多传统关系数据库扩展难的特点也爆发了出来，NoSQL数据库也应运而生。然而区别于以往的使用方法，许多NoSQL都有着自己的限制，从而也导致了入门难的问题。这里我们为大家分享上海创行科技技术总监严澜的博文——如何搭建高效的MongoDB集群。在大数据的时代，传统的关系
MongoDB集群高可用
小城我家
09-27 576
MongoDB集群高可用 MongoDB主从复制架构原理和缺陷 master-slave架构中master节点负责数据的读写，slave没有写入权限只负责读取数据 在主从结构中，主节点的操作记录成为oplog（operation log）。oplog存储在系统数据库local的oplog.$main集合中，这个集合的每个文档都代表主节点上执行的一个操作。从服务器会定期从主服务器中获取oplog记录，然后在本机上执行！对于存储oplog的集合，MongoDB采用的是固定集合，也就是说着操作过多，新的操作会覆
MongoDB第一话 -- Docker安装MongoDB以及Springboot集成MongoDB
生生不息，则源源不断
06-28 554
本文主要记录MongoDB的安装及使用MongoDB是一个基于分布式文件存储的数据库，是非关系型数据库，是面向集合存储。易使用，易部署，存储非常方便。 因为是面向集合存储，结构完全自定义，不需要维护关系，可以通过字段来检索。基于liunx centos7，docker-compsoe，镜像mongo.4.2.21 2.2 启动容器 2.3 控制台界面 访问ip:8081进入控制台，数据忽略 基于springboot2.6.8 3.2 yml配置 3.3 基于集合方式的存储 和mysql一样，只不过不支持
mongodb_metrics
weixin_42976232的博客
03-30 2719
＃HELP go_gc_duration_seconds GC调用持续时间的摘要。 ＃TYPE go_gc_duration_seconds摘要 go_gc_duration_seconds {quantile =“ 0”} 4.1400000000000003e-05 go_gc_duration_seconds {quantile =“ 0.25”} 4.77e-05 go_gc_durati...
MongoDB高可用集群搭建（主从、分片、路由、安全验证）
qq_21153619的博客
08-07 4684
目录 一、环境准备 1、部署图 2、模块介绍 3、服务器准备 二、环境变量 1、准备三台集群 2、安装解压 3、配置环境变量 三、集群搭建 1、新建配置目录 2、修改配置文件 3、分发其他节点 4、批量启动 5、创建配置服务器副本集 四、集群测试 1、启动路由服务器客户端 2、插入数据 3、验证主从 5、web控制台（浏览器访问） 1、登陆路由服务器 2、...
MongoDB数据同步工具mongosync
致我那些年搬过的砖
07-10 2635
参考： http://blog.chinaunix.net/uid-1757778-id-5064216.html
docker中部署mongodb副本集
anboguan0765的博客
07-04 136
1.基本信息如下 服务器地址 192.168.73.129 副本集名称 rs 容器节点及端口映射 m0 37017:27017 m147017:27017 m257017:27017 注：机器环境安装docker 2.部署步骤 2.1下载mongo镜像 docker pull mongo 2.2 启动三个节点 ...
java连接mongoDB的高可用性实现
fct2001140269的博客
11-26 683
使用mongoDB集群实现高可用性HA,如果其中一台机器宕机，mongodb集群的连接主机自动会切换到其他主机，java实现代码如下 package cetc.anji.judgeSpeed.topology; import java.util.ArrayList; import java.util.List; import org.bson.Document; import com.mon...
mongodb高可用方案（一）主从复制
小范的博客
01-29 3369
一、mongodb为什么要做主从 1、数据的备份,有利于故障的恢复 2、读写分离,主节点负责写操作,从节点负责读操作,这样就把读写压力分开,保证系统的稳定性. 二、mongodb主从复制的原理 主节点会记录写有关的操作，读操作不记录。这些操作记录在local数据库中的oplog.$admin这个集合，这个是一个固定大小的集合，可以修改oplogSize大小，单位MB，一般为磁盘
mongodb实现高可用
最新发布
09-16
MongoDB实现高可用的方式主要有两种：Replica Set模式和Sharding模式。 在Replica Set模式中，MongoDB使用主从复制的方式来实现高可用。一个Replica Set由一个主节点和多个从节点组成，主节点负责接收写操作并将数据...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值