MongoDB复制集

最新推荐文章于 2023-07-04 20:21:58 发布
最新推荐文章于 2023-07-04 20:21:58 发布
阅读量476 收藏 1
点赞数 1
分类专栏： 数据库 文章标签： MongoDB MongoDB复制集 高可用
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/L835311324/article/details/94741050
版权

文章目录

复制集

简介

MongoDB中的副本集是一组提供冗余和高可用性的mongod进程。复制集的成员有

  • Primary：主节点是副本集中唯一接收写入操作的成员。MongoDB在主节点上进行写操作，然后在主节点的oplog上记录操作（幂等操作）。从节点复制此日志并将操作应用于其数据集。副本集的所有成员都可以接受读取操作。但是，默认情况下，应用程序将其读取操作定向到主成员。

在这里插入图片描述

  • Secondaries：Secondaries节点从Primary节点进行复制操作，以维护相同的数据集。Secondaries节点根据根据配置可以成为特殊节点，比如：delay节点，hidden节点，arbiter节点。虽然客户端无法将数据写入从节点，但客户端可以进行配置在从节点成员读取数据。

在这里插入图片描述

当客户端执行写入操作，必须等到大多数节点写入才会返回确认，这里的多数（M）计算为所有投票成员的大多数，而不仅仅是数据承载投票成员。例如，在3个成员的副本集中，操作将需要来自3个成员中的2个的确认。如果主服务器未在wtimeout限制内返回写入确认 ，则写入操作将失败并出现写入错误。

在这里插入图片描述

特殊从节点

优先级为0的节点

优先级为0的节点不能触发选举，也不能成为主节点，其他与普通的从节点一样，维护数据集的副本，接受读取操作，并在选举中投票，一般将辅助节点配置为优先级为0以防止它成为主节点，这在多数据中心部署中特别有用

在这里插入图片描述

hidden节点

隐藏成员维护主节点数据集，但对客户端应用程序不可见。hidden节点必须始终优先为0，因此不能成为主节点，但是hidden节点可以在副本集选举中投票，db.isMaster()方法不显示hidden节点。

在这里插入图片描述

初始化配置

{
  "_id" : <num>
  "host" : <hostname:port>,
  "priority" : 0, # 优先级为0
  "hidden" : true # 隐藏开关打开
}

动态配置方法

cfg = rs.conf()
cfg.members[0].priority = 0
cfg.members[0].hidden = true
rs.reconfig(cfg)

delay节点

延迟节点，数据落后于主库一段时间，也因为数据是延时的，不应该提供服务和参与选举，通常也是hidden节点(优先级为0，不能成为主，隐藏的，不接受客户端请求)

由于延迟成员是数据集的“滚动备份”或运行“历史”快照，因此它们可以帮助您从各种人为错误中恢复。例如，延迟成员可以从不成功的应用程序升级和操作员错误（包括丢弃的数据库和集合）中恢复。

在这里插入图片描述

实例配置：

延迟成员的 members[n].priority等于0， members[n].hidden等于true，members[n\].slaveDelay等于延迟的秒数：

{ 
   “  _ id” ： < num > ，
   “host”  ： < hostname ：port > ，
   “priority”  ： 0 ，
   “slaveDelay”  ： < seconds > ，
   “hidden”  ： true 
}

也可以动态将某个节点转换成延迟节点

cfg = rs.conf()
cfg.members[0].priority = 0
cfg.members[0].hidden = true
cfg.members[0].slaveDelay = 3600
rs.reconfig(cfg)

arbiter节点

主要负责选主过程中投票，不存任何数据，也不提供服务

常用的架构

一主两从

在这里插入图片描述

当主节点dow了,会自动触发选举，得到一个新的主节点并告知客户端，对应用来说是透明的

在这里插入图片描述

一主一从一投票节点

Arbiter节点没有数据也不参与选举，只有一个功能就是投票。

在这里插入图片描述

当主down了,这时候投票节点就可以参与投票，如果网络没问题那么从节点就会提升为主继续对外提供服务

[外链图片转存失败(img-l1DU4cCx-1562316574246)(https://docs.mongodb.com/v3.6/_images/replica-set-w-arbiter-trigger-election.bakedsvg.svg)]

规划

由于机器不够，就用多实例来完成实验

操作系统版本IP：PORTMongoDB版本安装方式
CentOS Linux release 7.6.1810 (Core)192.168.240.21:270173.6.13二进制包解压
CentOS Linux release 7.6.1810 (Core)192.168.240.21:280183.6.13二进制包解压
CentOS Linux release 7.6.1810 (Core)192.168.240.21:290193.6.13二进制包解压

前期准备

关闭防火墙和selinux

systemctl  stop firewalld
setenforce  0

安装MongoDB

创建用户

useradd   mongo 
echo "mongo" | passwd mongo --stdin

关闭hugepage大页内存

Transparent Huge Pages（THP）是一种Linux内存管理系统，通过使用更大的内存页面，可以减少具有大量内存的计算机上的Translation Lookaside Buffer（TLB）查找的开销。 但是，数据库工作负载通常在THP上表现不佳，因为它们往往具有稀疏而不是连续的内存访问模式。您应该在Linux机器上禁用THP以确保使用MongoDB获得最佳性能。

cat  /etc/init.d/disable-transparent-hugepages
#!/bin/bash
### BEGIN INIT INFO
# Provides:          disable-transparent-hugepages
# Required-Start:    $local_fs
# Required-Stop:
# X-Start-Before:    mongod mongodb-mms-automation-agent
# Default-Start:     2 3 4 5
# Default-Stop:      0 1 6
# Short-Description: Disable Linux transparent huge pages
# Description:       Disable Linux transparent huge pages, to improve
#                    database performance.
### END INIT INFO

case $1 in
  start)
    if [ -d /sys/kernel/mm/transparent_hugepage ]; then
      thp_path=/sys/kernel/mm/transparent_hugepage
    elif [ -d /sys/kernel/mm/redhat_transparent_hugepage ]; then
      thp_path=/sys/kernel/mm/redhat_transparent_hugepage
    else
      return 0
    fi

    echo 'never' > ${thp_path}/enabled
    echo 'never' > ${thp_path}/defrag

    re='^[0-1]+$'
    if [[ $(cat ${thp_path}/khugepaged/defrag) =~ $re ]]
    then
      # RHEL 7
      echo 0  > ${thp_path}/khugepaged/defrag
    else
      # RHEL 6
      echo 'no' > ${thp_path}/khugepaged/defrag
    fi

    unset re
    unset thp_path
    ;;
esac

关闭大页内存

chmod 755 /etc/init.d/disable-transparent-hugepages  # 设置脚本权限
chkconfig --add disable-transparent-hugepages    # 设置开机启动
/etc/init.d/disable-transparent-hugepages  start  # 关闭内存大页

验证

cat /sys/kernel/mm/transparent_hugepage/enabled
cat /sys/kernel/mm/transparent_hugepage/defrag

都出现

always madvise [never]

表示成功关闭

安装MongoDB3.6

创建目录

mkdir -p /mongodb/bin
mkdir -p /mongodb/{27017,28018,29019}/conf
mkdir -p /mongodb/{27017,28018,29019}/log
mkdir -p /mongodb/{27017,28018,29019}/data

上传MongoDB3.6到/usr/local/src目录下

cd /usr/local/src
tar xf mongodb-linux-x86_64-rhel70-3.6.13.tgz
cp /usr/local/src/mongodb-linux-x86_64-rhel70-3.6.13/bin/* /mongodb/bin/
echo 'PATH="$PATH:/mongodb/bin"' >> /etc/profile
source /etc/profile

创建配置文件

# cat /mongodb/27017/conf/mongodb.conf
processManagement:
   fork: true   # 在后台运行
net:
   bindIp: 192.168.240.21   # 监听的IP地址
   port: 27017     # 监听的端口地址
storage:
   dbPath: "/mongodb/27017/data"    # 数据存放路径
systemLog:
   destination: file
   path: "/mongodb/27017/log/mongodb.log"  # 日志位置
   logAppend: true   # 追加形式写日志
storage:
   journal:
      enabled: true 
replication:
   replSetName: "rs0" # 设置复制集名称

不同的实例使用不同port，不同的log路径，以及不通的数据存放路径，其他可以不变

修改权限

chown -R mongo:mongo /mongodb/

启动多实例

sudo -u mongo /mongodb/bin/mongod -f /mongodb/27017/conf/mongodb.conf
sudo -u mongo /mongodb/bin/mongod -f /mongodb/28018/conf/mongodb.conf
sudo -u mongo /mongodb/bin/mongod -f /mongodb/29019/conf/mongodb.conf

配置复制集

连接其中一个实例,这里连接27017端口的实例

mongo --host 192.168.240.21 --port 27017

配置复制集

> config = {_id:'rs0',members:[
    {_id:0,host: '192.168.240.21:27017'},
    {_id:1,host: '192.168.240.21:28018'},
    {_id:2,host: '192.168.240.21:29019'}
]}
> rs.initiate(config)

执行rs.initiate(config),结果如下，ok为1标识成功

> rs.initiate(config)
{
        "ok" : 1,
        "operationTime" : Timestamp(1562308842, 1),
        "$clusterTime" : {
                "clusterTime" : Timestamp(1562308842, 1),
                "signature" : {
                        "hash" : BinData(0,"AAAAAAAAAAAAAAAAAAAAAAAAAAA="),
                        "keyId" : NumberLong(0)
                }
        }
}

复制集常用管理操作

查看复制集状态

rs.isMaster()
rs.status()

查看复制集配置

rs.config()

添加普通节点

rs.add("ip:port")

删除一个节点

rs.remove("ip:port")

新增仲裁节点

rs.addArb("ip:port")

调整副本集优先级（优先级为0的节点，无法成为主节点）

cfg = rs.conf()
cfg.members[0].priority = 0.5
cfg.members[1].priority = 2
cfg.members[2].priority = 2
rs.reconfig(cfg)

配置非投票节点（votes和priority必须为0）

cfg = rs.conf();
cfg.members[3].votes = 0; 
cfg.members[3].priority = 0;
rs.reconfig(cfg);

更改Oplog大小

use local
db.oplog.rs.stats().maxSize
db.adminCommand({replSetResizeOplog: 1, size: 16000})

重新触发选主

rs.stepDown()

一段时间内不能成为主

rs.freeze(120)

启用链式复制

cfg = rs.config()
cfg.settings.chainingAllowed = true
rs.reconfig(cfg)

参考文档

十五十六
关注
  • 1
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
每期一个小窍门: 灰度重启 mongodb 复制集
李昊轩的博客
08-01 488
k8s/非容器化 的 mongodb复制集的灰度重启
MongoDB集群高可用
小城我家
09-27 580
MongoDB集群高可用 MongoDB主从复制架构原理和缺陷 master-slave架构中master节点负责数据的读写，slave没有写入权限只负责读取数据 在主从结构中，主节点的操作记录成为oplog（operation log）。oplog存储在系统数据库local的oplog.$main集合中，这个集合的每个文档都代表主节点上执行的一个操作。从服务器会定期从主服务器中获取oplog记录，然后在本机上执行！对于存储oplog的集合，MongoDB采用的是固定集合，也就是说着操作过多，新的操作会覆
mongodb复制集集群部署、测试、选举原理
最新发布
youcan_doit的博客
07-04 1387
mongodb复制集集群部署、测试、选举原理
MongoDB 复制集(Replica Set)
乐沙弥的世界
03-06 5445
复制集(replica Set)或者副本集是MongoDB的核心高可用特性之一，它基于主节点的oplog日志持续传送到辅助节点，并重放得以实现主从节点一致。再结合心跳机制，当感知到主节点不可访问或宕机的情形下，辅助节点通过选举机制来从剩余的辅助节点中推选一个新的主节点从而实现自动切换。这个特性与MySQL MHA实现原理一样。本文主要描述MongoDB复制集并给出创建复制集示例以及完成自动切换。
三、MongoDB复制集，分片集群
Xx__WangQi的博客
04-22 1585
一、MongoDB 高可用复制集架构 MongoDB 复制集 MongoDB复制集的主要意义在于实现服务高可用，类似于Redis中的哨兵模式 它主要提供两个方面的功能 1. 数据写入主节点（Primary）时将数据复制到另一个副本节（Secondary）点上 2. 主节点发生故障时自动选举出一个新的替代节点 在实现高可用的同时，复制集实现了其他几个作用 数据分发：将数据从一个区域复制到另一个区域，减少另一个区域的读延迟 读写分离：不同类型的压力分别在不同的节点上执行 异地容灾：在数据.
MongoDB复制集搭建
09-08
MongoDB复制集搭建 MongoDB复制集搭建是 MongoDB 的一个重要特性，它可以提高数据库的可用性和安全性。在本文中，我们将详细介绍 MongoDB 复制集搭建的过程。 复制集的概念 在 MongoDB 中，复制集（Replica Set）...
mongodb 复制集搭建实例
08-28
MongoDB复制集搭建实例 MongoDB是一个高性能、开源、无模式的文档型数据库，它以其灵活性、可扩展性和丰富的功能而被广泛应用于大数据处理、Web应用、内容管理系统等多个领域。复制集是MongoDB中的一个重要特性，它...
mongodb复制集
10-23
1.1.2. 节点 1.1.3. 工作方式 读写默认都在主节点上,如果对数据要求不是很严格的话,比如日志,可以从从节点上读,减少主节点的压力.
MongoDB复制集原理详解
09-09
MongoDB复制集是一种高可用性和容错性的架构设计，它通过在不同的服务器上维护数据库的副本来确保数据的安全性和服务的连续性。复制集的基本概念包括Primary节点、Secondary节点、Arbiter节点以及一些特殊配置的节点...
MongoDB复制集集群配置文件.rar
03-18
配置MongoDB复制集集群和分片通常涉及以下步骤： 1. 安装MongoDB服务器：在所有参与的服务器上安装MongoDB。 2. 初始化复制集：创建配置文件，启动每个成员，并使用`rs.initiate()`命令初始化复制集。 3. 添加副...
mongodb的复制集
淼淼不暴躁!
06-10 525
mongodb 复制集的搭建
MongoDB复制集原理
2301_78145658的博客
06-28 689
Mongodb复制集由一组Mongod实例（进程）组成，包含一个Primary节点和多个Secondary节点，Mongodb Driver（客户端）的所有数据都写入Primary，Secondary从Primary同步写入的数据，以保持复制集内所有成员存储相同的数据集，提供数据的高可用。下图（图片源于Mongodb官方文档）是一个典型的Mongdb复制集，包含一个Primary节点和2个Secondary节点。
mongodb复制原理及其操作
weixin_44381207的博客
01-22 1103
一、mongodb复制（副本集） MongoDB复制是将数据同步在多个服务器的过程。 复制提供了数据的冗余备份，并在多个服务器上存储数据副本，提高了数据的可用性， 并可以保证数据的安全性。 复制还允许从硬件故障和服务中断中恢复数据。 二、mongodb复制原理 mongodb的复制至少需要两个节点。其中一个是主节点，负责处理客户端请求，其余的都是从节点，负责复制主节点上的数据。 mongodb各个...
配置mongodb复制集时遇见的坑
Wopelo的博客
05-16 6023
最近在做mangodb复制集的时候，遇到了很多问题，为了让以后的亲在遇到类似的问题时可以找到资料以供参考，下面我就分享一下我遇到的问题已经解决方案。 我的是在一台centos7的虚拟机上配置mongodb复制集的，包括一个主节点(mongo27017)、两个从节点(mongo27018/mongo27019)、一个投票节点(mongo27020)。四个mongodb数据库都在home文件夹下的D...
MongoDB 复制集管理
weixin_33937778的博客
09-14 179
1.配置允许在从节点读取数据默认MongoDB 复制集的从节点不能读取数据，可以使用 rs.slaveOk() 命令允许能够在从节点读取数据。abc:PRIMARY> show dbs #在主节点上可以读取数据admin 0.000GB config 0.000GB local 0.000GB school ...
mongodb 复制集 维护小结
Captains-Felix的专栏
07-13 7470
副本集成员最多12个成员，其中只有7个成员拥有投票权。这是为了减少 心跳请求的网络流量和选举话费的时间。心跳每2秒发送一次。 一、新增副本集成员 1、登录primary 2、use admin >rs.add("new_node:port") 或 rs.add({"_id":4,"host":"new_node:port","priority":1,"hidden":fals
MongoDB复制集【主从复制】
JohnnyG2000的博客
06-07 2374
MongoDB复制是将数据同步到多个服务器的过程；复制集提供了数据的冗余备份并提高了数据的可用性，通常可以保证数据的安全性；复制集还允许从硬件故障和服务中断中恢复数据。MongoDB复制基本结构基本的架构由3台服务器组成，一个三成员的复制集，由三个有数据，或者两个有数据，一个作为仲裁者。1、三个存储数据的复制集具有三个存储数据的成员的复制集有： [外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-eWBYBCZ2-1654572152112)(\素材\mongodb\复制架构一主两
硬卷 NoSQL 数据库系列（七）：MongoDB 复制集技术原理详解
民工哥的博客
05-11 384
点关注公众号，回复“1024”获取2TB学习资源！前面介绍了 MongoDB 的安装与基础的 CURD 操作、索引与聚合、基本使用、运维工具与授权认证、WT 存储引擎等相关的知识点。今天我将详细的为大家介绍 MongoDB 复制集技术相关知识，希望大家能够从中收获多多！如有帮助，请点在看、转发支持一波！！！在实际的生产环境中，我们需要考虑数据冗余和高可靠性，即通过在不同的机器上保存副本来保证数据的...
MongoDB集群之复制集，分片
上善若泪
11-10 1429
MongoDB有三种集群部署模式，分别为主从复制（）、副本集（）和分⽚（Sharding）模式。⾼可⽤（主要⽬标）：当⼀个结点故障时⾃动切换到其他结点数据冗余（主要⽬标）：数据复制到n个结点上，增加数据安全性，同时为⾼可⽤提供基础功能隔离（次要⽬标）：使⽤不同的结点隔离某些有特殊需求的功能，⽐如使⽤⼀个结点进⾏OLAP运算（⼤规模资源占⽤），使⽤⼀个结点在远程做灾备（性能要求不如本地⾼），读写分离等等；

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值