MongoDB集群之复制集搭建

最新推荐文章于 2023-10-30 10:11:27 发布
最新推荐文章于 2023-10-30 10:11:27 发布
阅读量455 收藏 1
点赞数
分类专栏： mongodb 文章标签： mongodb mongodb复制集
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_42494845/article/details/109217314
版权

简介

一组Mongodb复制集，就是一组mongod进程，这些进程维护同一个数据集合。复制集提供了数据冗余和高等级的可靠性，是生产部署的基础。

目的

  • 保证数据在生产部署时的冗余和可靠性，通过在不同的机器上保存副本来保证数据的不会因为单点损坏而丢失。能够随时应对数据丢失、机器损坏带来的风险。
  • 提高读取能力，用户的读取服务器和写入服务器在不同的地方，而且，由不同的服务器为不同的用户提供服务，提高整个系统的负载。

机制

  • 一组复制集就是一组mongod实例掌管同一个数据集，实例可以在不同的机器上面。实例中包含一个主导（Primary），接受客户端所有的写入操作，其他都是副本实例（Secondary），从主服务器上获得数据并保持同步。
  • 主服务器很重要，包含了所有的改变操作（写）的日志。但是副本服务器集群包含有所有的主服务器数据，因此当主服务器挂掉了，就会在副本服务器上重新选取一个成为主服务器。
  • 每个复制集还有一个仲裁者（Arbiter），仲裁者不存储数据，只是负责通过心跳包来确认集群中集合的数量， 并在主服务器选举的时候作为仲裁决定结果。

三个存储数据的复制
假设一个复制集由一个主，两个从库组成，主库宕机时，这两个从库都可以被选为主库。
在这里插入图片描述
当主库宕机后,两个从库都会进行竞选，其中一个变为主库，当原主库恢复后，作为从库加入当前的复制集群即可。
在这里插入图片描述

存在arbiter节点的复制集
一个主库，一个从库，可以在选举中成为主库，一个arbiter节点，在选举中，只进行投票，不能成为主库。
在这里插入图片描述
说明：由于arbiter节点没有复制数据，因此这个架构中仅提供一个完整的数据副本。arbiter节点只需要更少的资源，代价是更有限的冗余和容错。
当主库宕机时，将会选择从库成为主，主库修复后，将其加入到现有的复制集群中即可。

Primary选举

复制集通过replSetInitiate命令（或mongo shell的rs.initiate()）进行初始化，初始化后各个成员间开始发送心跳消息，并发起Priamry选举操作，获得『大多数』成员投票支持的节点，会成为Primary，其余节点成为Secondary。
『大多数』的定义
假设复制集内投票成员数量为N，则大多数为 N/2 + 1，当复制集内存活成员数量不足大多数时，整个复制集将无法选举出Primary，复制集将无法提供写服务，处于只读状态。

成员说明

成员说明
PrimaryPriamry的作用是接收用户的写入操作，将自己的数据同步给其他的Secondary。
Secondary正常情况下，复制集的Seconary会参与Primary选举（自身也可能会被选为Primary），并从 Primary同步新写入的数据，以保证与Primary存储相同的数据。Secondary可以提供读服务，增加Secondary节点可以提供复制集的读服务能力，同时提升复制集的可用性。另外， Mongodb支持对复制集的Secondary节点进行灵活的配置，以适应多种场景的需求。
ArbiterArbiter节点只参与投票，不能被选为Primary，并且不从Primary同步数据。比如你部署了一个 2个节点的复制集，1个Primary，1个Secondary，任一节点宕机，复制集将不能提供服务了 （无法选出Primary），这时可以给复制集添加一个Arbiter节点，即使有节点宕机，仍能选出 Primary。Arbiter本身不存储数据，是非常轻量级的服务，当复制集成员为偶数时，好加入一个Arbiter节点，以提升复制集可用性。
Priority0Priority0节点的选举优先级为0，不会被选举为Primary。比如你跨机房A、B部署了一个复制集，并且想指定Primary必须在A机房，这时可以将B机房的复制集成员Priority设置为0，这样 Primary就一定会是A机房的成员。（注意：如果这样部署，好将『大多数』节点部署在A机房，否则网络分区时可能无法选出Primary）
Vote0Mongodb 3.0里，复制集成员多50个，参与Primary选举投票的成员多7个，其他成员 （Vote0）的vote属性必须设置为0，即不参与投票。
HiddenHidden节点不能被选为主（Priority为0），并且对Driver不可见。因Hidden节点不会接受 Driver的请求，可使用Hidden节点做一些数据备份、离线计算的任务，不会影响复制集的服务。
DelayedDelayed节点必须是Hidden节点，并且其数据落后与Primary一段时间（可配置，比如1个小 时）。因Delayed节点的数据比Primary落后一段时间，当错误或者无效的数据写入Primary 时，可通过Delayed节点的数据来恢复到之前的时间点。

搭建复制集

创建3个mongo容器

docker create --name mongo01  -p 27017:27017 -v mongo-data-01:/data/db mongo -replSet "rs0" --bind_ip_all 
docker create --name mongo02  -p 27018:27017 -v mongo-data-02:/data/db mongo -replSet "rs0" --bind_ip_all 
docker create --name mongo03  -p 27019:27017 -v mongo-data-03:/data/db mongo -replSet "rs0" --bind_ip_all

启动容器

docker start mongo01 mongo02 mongo03

在这里插入图片描述
进入容器操作

 docker exec -it mongo01 /bin/bash

登录到mongo服务

 mongo 192.168.130.128:27017

初始化复制集集群

rs.initiate({   
	_id : "rs0",   
	members: [      
		{ _id: 0, host: "192.168.130.128:27017" },      
		{ _id: 1, host: "192.168.130.128:27018" },      
		{ _id: 2, host: "192.168.130.128:27019" }   
	] 
})

响应

{
	"ok" : 1, #成功
	"$clusterTime" : {
		"clusterTime" : Timestamp(1603336388, 1),
		"signature" : {
			"hash" : BinData(0,"AAAAAAAAAAAAAAAAAAAAAAAAAAA="),
			"keyId" : NumberLong(0)
		}
	},
	"operationTime" : Timestamp(1603336388, 1)
}

查看集群状态

rs.status()

响应

{
	"set" : "rs0",
	"date" : ISODate("2020-10-22T03:14:38.732Z"),
	"myState" : 1,
	"term" : NumberLong(1),
	"syncSourceHost" : "",
	"syncSourceId" : -1,
	"heartbeatIntervalMillis" : NumberLong(2000),
	"majorityVoteCount" : 2,
	"writeMajorityCount" : 2,
	"votingMembersCount" : 3,
	"writableVotingMembersCount" : 3,
	"optimes" : {
		"lastCommittedOpTime" : {
			"ts" : Timestamp(1603336469, 1),
			"t" : NumberLong(1)
		},
		"lastCommittedWallTime" : ISODate("2020-10-22T03:14:29.165Z"),
		"readConcernMajorityOpTime" : {
			"ts" : Timestamp(1603336469, 1),
			"t" : NumberLong(1)
		},
		"readConcernMajorityWallTime" : ISODate("2020-10-22T03:14:29.165Z"),
		"appliedOpTime" : {
			"ts" : Timestamp(1603336469, 1),
			"t" : NumberLong(1)
		},
		"durableOpTime" : {
			"ts" : Timestamp(1603336469, 1),
			"t" : NumberLong(1)
		},
		"lastAppliedWallTime" : ISODate("2020-10-22T03:14:29.165Z"),
		"lastDurableWallTime" : ISODate("2020-10-22T03:14:29.165Z")
	},
	"lastStableRecoveryTimestamp" : Timestamp(1603336459, 1),
	"electionCandidateMetrics" : {
		"lastElectionReason" : "electionTimeout",
		"lastElectionDate" : ISODate("2020-10-22T03:13:18.828Z"),
		"electionTerm" : NumberLong(1),
		"lastCommittedOpTimeAtElection" : {
			"ts" : Timestamp(0, 0),
			"t" : NumberLong(-1)
		},
		"lastSeenOpTimeAtElection" : {
			"ts" : Timestamp(1603336388, 1),
			"t" : NumberLong(-1)
		},
		"numVotesNeeded" : 2,
		"priorityAtElection" : 1,
		"electionTimeoutMillis" : NumberLong(10000),
		"numCatchUpOps" : NumberLong(0),
		"newTermStartDate" : ISODate("2020-10-22T03:13:19.030Z"),
		"wMajorityWriteAvailabilityDate" : ISODate("2020-10-22T03:13:20.293Z")
	},
	"members" : [
		{
			"_id" : 0,
			"name" : "192.168.130.128:27017",
			"health" : 1,
			"state" : 1,
			"stateStr" : "PRIMARY", #主节点
			"uptime" : 280,
			"optime" : {
				"ts" : Timestamp(1603336469, 1),
				"t" : NumberLong(1)
			},
			"optimeDate" : ISODate("2020-10-22T03:14:29Z"),
			"syncSourceHost" : "",
			"syncSourceId" : -1,
			"infoMessage" : "",
			"electionTime" : Timestamp(1603336398, 1),
			"electionDate" : ISODate("2020-10-22T03:13:18Z"),
			"configVersion" : 1,
			"configTerm" : 1,
			"self" : true,
			"lastHeartbeatMessage" : ""
		},
		{
			"_id" : 1,
			"name" : "192.168.130.128:27018",
			"health" : 1,
			"state" : 2,
			"stateStr" : "SECONDARY", #从节点
			"uptime" : 90,
			"optime" : {
				"ts" : Timestamp(1603336469, 1),
				"t" : NumberLong(1)
			},
			"optimeDurable" : {
				"ts" : Timestamp(1603336469, 1),
				"t" : NumberLong(1)
			},
			"optimeDate" : ISODate("2020-10-22T03:14:29Z"),
			"optimeDurableDate" : ISODate("2020-10-22T03:14:29Z"),
			"lastHeartbeat" : ISODate("2020-10-22T03:14:37.082Z"),
			"lastHeartbeatRecv" : ISODate("2020-10-22T03:14:38.594Z"),
			"pingMs" : NumberLong(0),
			"lastHeartbeatMessage" : "",
			"syncSourceHost" : "192.168.130.128:27017",
			"syncSourceId" : 0,
			"infoMessage" : "",
			"configVersion" : 1,
			"configTerm" : 1
		},
		{
			"_id" : 2,
			"name" : "192.168.130.128:27019",
			"health" : 1,
			"state" : 2,
			"stateStr" : "SECONDARY", #从节点
			"uptime" : 90,
			"optime" : {
				"ts" : Timestamp(1603336469, 1),
				"t" : NumberLong(1)
			},
			"optimeDurable" : {
				"ts" : Timestamp(1603336469, 1),
				"t" : NumberLong(1)
			},
			"optimeDate" : ISODate("2020-10-22T03:14:29Z"),
			"optimeDurableDate" : ISODate("2020-10-22T03:14:29Z"),
			"lastHeartbeat" : ISODate("2020-10-22T03:14:37.087Z"),
			"lastHeartbeatRecv" : ISODate("2020-10-22T03:14:38.605Z"),
			"pingMs" : NumberLong(0),
			"lastHeartbeatMessage" : "",
			"syncSourceHost" : "192.168.130.128:27017",
			"syncSourceId" : 0,
			"infoMessage" : "",
			"configVersion" : 1,
			"configTerm" : 1
		}
	],
	"ok" : 1,
	"$clusterTime" : {
		"clusterTime" : Timestamp(1603336469, 1),
		"signature" : {
			"hash" : BinData(0,"AAAAAAAAAAAAAAAAAAAAAAAAAAA="),
			"keyId" : NumberLong(0)
		}
	},
	"operationTime" : Timestamp(1603336469, 1)
}

测试复制集群

主库插入数据

rs0:PRIMARY> use test
switched to db test
rs0:PRIMARY> db.user.insert({"id":1001,"name":"zhangsan"})
WriteResult({ "nInserted" : 1 })

切换到复制库

rs0:PRIMARY> exit
bye
root@388f80cc2cfd:/# mongo 192.168.130.128:27018

在复制库查询数据
默认情况下从库是不允许读写操作的

rs0:SECONDARY> use test
switched to db test
rs0:SECONDARY> db.user.find()
#出错，默认情况下从库是不允许读写操作的
Error: error: {
	"topologyVersion" : {
		"processId" : ObjectId("5f90f806ee00d26cdccc1d22"),
		"counter" : NumberLong(4)
	},
	"operationTime" : Timestamp(1603336789, 1),
	"ok" : 0,
	"errmsg" : "not master and slaveOk=false",
	"code" : 13435,
	"codeName" : "NotMasterNoSlaveOk",
	"$clusterTime" : {
		"clusterTime" : Timestamp(1603336789, 1),
		"signature" : {
			"hash" : BinData(0,"AAAAAAAAAAAAAAAAAAAAAAAAAAA="),
			"keyId" : NumberLong(0)
		}
	}
}

设置允许从库读取数据

rs0:SECONDARY> rs.secondaryOk()
rs0:SECONDARY> db.user.find()
{ "_id" : ObjectId("5f90f9c2d5a6806dd78d4879"), "id" : 1001, "name" : "zhangsan" }
红丶
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
MongoDB复制集集群配置文件.rar
03-18
《MongoDB 分片复制集集群搭建》博客附件。 博客地址：https://blog.csdn.net/Supreme_Sir/article/details/114959912
MongoDB4.0 分片集群+复制集+读写分离详细搭建教程
lvshaorong的博客
05-13 7401
最近由于要存储大规模结构化数据，想到了MongoDB的口号For giant ideas，于是假设了下图架构的一个mongoDB集群。 先说说选型的原因，结构化数据很多数据库都可以存储，最常用的是mysql，而且mysql的集群也屡见不鲜。比如mycat或者mysqlproxy这种数据库网关就可以放置在多个普通的mysql服务器前面，或者像腾讯退出的TDSQL这种商业版本也是有内置数据库网关的，...
mongo认证配置又出问题了？来看看这个
泡泡茶壶的博客
04-19 2538
文章目录前言正常配置过程坑1: 起mongo终端引起的权限问题坑2: 集群中配置认证引起的问题终极权限-root总结参考文档 前言 某个晴朗的工作日，我正在自己的工位上勤勤恳恳的工（hua）作（shui），此时总监突然微信我：“小刘，这会儿工作忙吗？”，我当下后背就是一凉，慌忙回复到：“总监，我这会儿闲的很，哦不，是忙的很”。沉默了2秒之后，总监继续说到：“…这样啊，我这儿有个任务交给你，公司有两...
Mongo踩坑笔记
qq_42995068的博客
12-17 1692
Mongo踩坑笔记-1纯原创，请勿私自转发。仅供参考。原因起源:可能1:mongorestore数据量过大，磁盘不足导致mongo服务异常终止可能2:有人使用 kill -9 或者 其他方式非正常终止mongo进程原因3:mongo开启了复制集，异常终止后无法通过 --repair正常启动由于是一个复制集成员的mongo崩溃 纯原创，请勿私自转发。仅供参考。 原因起源: 可能1:mongorestore数据量过大，磁盘不足导致mongo服务异常终止 可能2:有人使用 kill -9 或者 其他方式非正常终止
“errmsg“ : “not master and slaveOk=false“_Mongo集群没有primary但有secondary时连接不上且不能读数据
单林敏的博客
07-06 1998
短暂解决方法 ## 第一种方法 db.getMongo().setSlaveOk(); ## 第二种方法 rs.slaveOk(); 之所以短暂是因为下次再通过mongo进入实例的时候，查询仍然会报错，所以我们需要固化(自动化)一下 固化上述方法 vi ~/.mongorc.js ## 增加一行解决问题 rs.slaveOk(); ## 还可以加点好玩的输出 var com = ["Good Luck", "Happy"]; var index = Math.floor(Math.random()*2)
mongodb复制集搭建
yuluo的博客
11-06 2125
主要意义是实现服务高可用。类似于服务集群的概念多采用一主二从的集群结构，通过日志来实现数据的读写。
Mongodb 副本集搭建失败的原因
热门推荐
qq_43506520的博客
04-19 1万+
Mongodb 副本集搭建失败的原因 简单搭建副本集群的教程 https://www.cnblogs.com/guigujun/p/9595234.html 这里说一下失败的原因 上面的教程中在admin 库中新建了root用户，然后配置文件改成了auth=true 开启了auth=true 认证登陆配置后 ，使用mongo shell 登陆mongodb 此时是无验证的，只是让你进入了shell...
分布式数据库NoSQL(九)——MongoDB 复制集&分片
m0_64139004的博客
10-22 5735
MongoDB 目前的高可用架构主要有主从、复制集、以及分片，单纯的主从技术几乎被淘汰，整个稳定性以及可靠性方面复制集要比主从好，所以现在更多的会去使用复制集。在接下来的实践过程中，我们将在一台服务器（单机）实现复制集和分片。
Docker 搭建集群MongoDB的实现步骤
01-09
由于公司业务需要，我们打算自己搭建 MongoDB 的服务，因为 MongoDB 的云数据库好贵，我们这次采用副本集的方式来搭建集群，三台服务器，一主、一副、一仲裁 基本概念 Replica Set 副本集：一个副本集就是一组 ...
搭建高可用mongodb集群
03-02
这篇文章主要介绍副本集：mongoDB官方已经不建议使用主从模式了，替代方案是采用副本集的模式，点击查看，如图：那什么是副本集呢？打魔兽世界总说打副本，其实这两个概念差不多一个意思。游戏里的副本是指玩家集中...
Mongodb复制集(集群)搭建demo.doc
07-15
Mongodb集群搭建入门教程，适合对mongodb感兴趣的入门新手学习使用，共勉。 Mongodb你懂的。
MongoDB基于windows的搭建复制集（最详细教程）
大王的博客
06-25 745
第一步：从MongoDB官网下载MongoDB到本地并解压 我是解压到c盘根目录。解压完到本地的目录如下，其中data文件是自己新建的，在data文件夹下再新建conf、db、log三个文件夹，conf文件夹是编写mongodb的配置，db是保存的数据，log是日志。在conf文件夹下新建rs1.conf、rs2.conf、rs3.conf三个配置文件；在db文件夹下新建rs1、rs2、rs3三个文件夹 第二步：现在进行复制集节点的配置。mongod有几种启动方式，在这里只是用了配置文件的启动方..
实验：搭建mongodb复制集(2)
qq_24573381的博客
03-28 1160
5、副本节点读操作 在主节点上操作 myrs:PRIMARY> show dbs admin 0.000GB config 0.000GB local 0.000GB myrs:PRIMARY> use bbs switched to db bbs myrs:PRIMARY> show dbs admin 0.000GB config 0.000GB local 0.000GB myrs:PRIMARY> db.usr.insert({name:"wsq",
分布式数据库NoSQL(一)——初识 MongoDB
m0_64139004的博客
09-23 3375
在 /etc/mongod（没有路径就创建）路径下新建配置文件 mongod.conf，使用配置文件启动 MongoDB 服务（把命令写入配置文件，以后启动服务就不用再输入一长串的命令，直接启动配置文件即可）。（平台已经帮你配置好环境，如果是在本地环境练习，请安装并配置好 MongoDB）启动 MongoDB 服务，要准备数据存放位置，日志文件和配置文件。以上工作准备完成，便可以开启服务了，配置文件启动命令如下（在命令行中输入）： mongod -f /etc/mongod/mongod.conf。
mongodb 学习之——MongoDB 复制集搭建
程序猿
12-24 119
安装：linux 下指定配置文件安装mongodb 1、复制集replica sets 1.1 什么是复制集？ 复制集是由一组拥有相同数据集的mongod实例做组成的集群。 复制集是一个集群，它是2台及2台以上的服务器组成，以及复制集成员包括Primary主节点,secondary从节点和投票节点。 复制集提供了数据的冗余备份，并在多个服务器上存储数据副本，提高了数据的可用性,保证数据的安全性...
MongoDB错误：Could not find host matching read preference { mode: “primary“ } for set shard1
h1773655323的博客
10-09 2959
【代码】MongoDB错误：Could not find host matching read preference { mode: "primary" } for set shard1。
异常总结
ProgramApeOfHeaven的博客
05-06 1171
文章目录一.概述二.异常解释三.其他异常1.mongodb中的异常1.1异常com.mongodb.MongoNotPrimaryException 一.概述 二.异常解释 三.其他异常 1.mongodb中的异常 1.1异常com.mongodb.MongoNotPrimaryException 触发: 对mongodb中数据进行更新 [2021-05-06 15:57:14] com.mongodb.MongoNotPrimaryException: Command failed with erro
MongoDB副本集群数据同步及主从复制
最新发布
qq_48590217的博客
10-30 844
MongoDB副本集群中，出现了一个新概念：仲裁节点，其实作用等同于哨兵节点，但它并不是副本集群必须存在的节点，因为主节点、副本节点都拥有投票能力，它的存在只是为了维护集群内的平衡，如集群节点为偶数时，可以添加一个仲裁节点，让集群保持奇数特性，确保每轮选举一次就能推出新主，避免多轮无效竞选的现象出现（不了解选举机制的后面会说原理）。执行上述初始化命令，只要看到ok:1这个字段值，说明初始化成功，接着稍等片刻，MongoDB会自动将当前连接的节点，设置为集群的主节点。集合中，可以直接去查询这个集合。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值