mongodb集群之副本集

最新推荐文章于 2023-05-19 11:42:37 发布
最新推荐文章于 2023-05-19 11:42:37 发布
阅读量338 收藏
点赞数
分类专栏： MongoDB集群
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/ran5909729/article/details/51692486
版权
  • 什么是副本集

那什么是副本集呢？打魔兽世界总说打副本，其实这两个概念差不多一个意思。游戏里的副本是指玩家集中在高峰时间去一个场景打怪，会出现玩家暴多怪物少的情况，游戏开发商为了保证玩家的体验度，就为每一批玩家单独开放一个同样的空间同样的数量的怪物，这一个复制的场景就是一个副本，不管有多少个玩家各自在各自的副本里玩不会互相影响。
mongoDB的副本也是这个，主从模式其实就是一个单副本的应用，没有很好的扩展性和容错性。而副本集具有多个副本保证了容错性，就算一个副本挂掉了还有很多副本存在，并且解决了上面第一个问题“主节点挂掉了，整个集群内会自动切换”。难怪mongoDB官方推荐使用这种模式。我们来看看mongoDB副本集的架构图：

这里写图片描述

由图可以看到客户端连接到整个副本集，不关心具体哪一台机器是否挂掉。主服务器负责整个副本集的读写，副本集定期同步数据备份，一但主节点挂掉，副本节点就会选举一个新的主服务器，这一切对于应用服务器不需要关心。我们看一下主服务器挂掉后的架构：

这里写图片描述

副本集中的副本节点在主节点挂掉后通过心跳机制检测到后，就会在集群内发起主节点的选举机制，自动选举一位新的主服务器。

官方推荐的副本集机器数量为至少3个，那我们也按照这个数量配置测试。

规划部署
因设备有限，暂时在一台服务器上，配置3个MongoDB；在/home/mongo目录下的mongo1,mongo2,mongo3,端口分别为：28017、28018、28019

    主节点：192.168.0.197:28017
    从节点：192.168.0.197:28018
    从节点：192.168.0.197:28019
  • 启动配置

先配置mongo1

存放整个mongodb文件

mkdir /home/mongo/mongo1

存放mongodb数据文件

mkdir /home/mongo/mongo1/data

进入mongo1的bin目录

cd /home/mongo/mongo1/bin

在/home/mongo/mongo1/bin目录下编写配置文件mongod1.conf

以下为具体内容：

#数据库文件路径
dbpath=/home/mongo/mongo1/data/

#日志文件
logpath=/home/mongo/mongo1/log/mongod.log

#副本集配置变量
replSet=repset

#修改数据目录存储模式，每个数据库的文件存储在DBPATH指定目录的不同的文件夹中
directoryperdb=true

#定义端口
port=28017

#后台启动
fork=true

#以追加的模式写入日志
logappend=true

在/home/mongo/mongo1/bin目录下编写启动脚本startmongod.sh

./mongod --config mongod1.conf

mongo2,mongo3的配置方法一样，但是注意目录和端口的区别

分别启动3个数据库服务器：mongo1，mongo2,mongo3

./startmongod.sh
  • 副本集

登录任意一台mongo

./mongo --port 28017    #默认的是27017，这里需要指定

使用admin数据库

>use admin
  • 配置副本集
>config = { _id:"repset", members:[
... {_id:0,host:"192.168.0.197:28017"},
... {_id:1,host:"192.168.0.197:28018"},
... {_id:2,host:"192.168.0.197:28019"}]
... }

输出

{
        "_id" : "repset",
        "members" : [
                {
                        "_id" : 0,
                        "host" : "192.168.0.197:28017"
                },
                {
                        "_id" : 1,
                        "host" : "192.168.0.197:28018"
                },
                {
                        "_id" : 2,
                        "host" : "192.168.0.197:28019"
                }
        ]
}
  • 初始化副本集
>rs.initiate(config)

输出成功

{
        "info" : "Config now saved locally.  Should come online in about a minute.",
        "ok" : 1
}

成功之后，当前节点会出现repset:Primary>的标示
注意，如果提示失败，有可能是数据库目录/home/mongo/mongo1/data在启动之前存在多余的文件或者空白文件夹，关闭所有MongoDB，删掉data里面的东西，重新启动
如果要导入数据库文件，在初始化副本集之前，就必须以导入
比如，在data下新建edu目录，然后再edu目录下放置 edu.ns edu.0 edu.1 等数据库文件。前面配置文件mongod1.conf 里面也配置了directoryperdb=true，它的作用就是修改数据目录存储模式，每个数据库的文件存储在DBPATH指定目录的不同的文件夹中

查看集群节点的状态

repset:Primary> rs.status()

输出

{
    "set" : "repset",
    "date" : ISODate("2016-06-15T07:13:43Z"),
    "myState" : 2,
    "syncingTo" : "127.0.0.1:28017",
    "members" : [
        {
            "_id" : 0,
            "name" : "127.0.0.1:28017",
            "health" : 1,
            "state" : 1,
            "stateStr" : "PRIMARY",
            "uptime" : 545,
            "optime" : Timestamp(1465974632, 1),
            "optimeDate" : ISODate("2016-06-15T07:10:32Z"),
            "lastHeartbeat" : ISODate("2016-06-15T07:13:42Z"),
            "lastHeartbeatRecv" : ISODate("2016-06-15T07:13:41Z"),
            "pingMs" : 0,
            "electionTime" : Timestamp(1465974285, 1),
            "electionDate" : ISODate("2016-06-15T07:04:45Z")
        },
        {
            "_id" : 1,
            "name" : "127.0.0.1:28018",
            "health" : 1,
            "state" : 2,
            "stateStr" : "SECONDARY",
            "uptime" : 623,
            "optime" : Timestamp(1465974632, 1),
            "optimeDate" : ISODate("2016-06-15T07:10:32Z"),
            "self" : true
        },
        {
            "_id" : 2,
            "name" : "127.0.0.1:28019",
            "health" : 1,
            "state" : 2,
            "stateStr" : "SECONDARY",
            "uptime" : 545,
            "optime" : Timestamp(1465974632, 1),
            "optimeDate" : ISODate("2016-06-15T07:10:32Z"),
            "lastHeartbeat" : ISODate("2016-06-15T07:13:42Z"),
            "lastHeartbeatRecv" : ISODate("2016-06-15T07:13:42Z"),
            "pingMs" : 0,
            "syncingTo" : "127.0.0.1:28017"
        }
    ],
    "ok" : 1
}

到此，副本集已经搭建成功

  • 副本集数据复制功能

登录到在主节点mongo1，并新建test数据库

repset:Primary> use test

插入数据库

repset:Primary> db.testdb.insert({"test1":"testval1"})

在副本节点mongo2、mongo3上连接到mongodb查看数据是否复制过来。

使用test 数据库。

repset:SECONDARY> use test

repset:SECONDARY> show tables;

输出

Sun Dec 29 21:50:48.590 error: { "$err" : "not master and slaveOk=false", "code" : 13435 } at src/mongo/shell/query.js:128

mongodb默认是从主节点读写数据的，副本节点上不允许读，需要设置副本节点可以读。

repset:SECONDARY> db.getMongo().setSlaveOk()

可以看到数据已经复制到了副本集。

repset:SECONDARY> db.testdb.find()

输出

{ "_id" : ObjectId("52c028460c7505626a93944f"), "test1" : "testval1" }
  • 副本集故障转移功能

先停掉主节点mongo1，可通过kill -2 进程数 的方法关闭MongoDB
在从节点下查看整个集群的状态

repset:SECONDARY> rs.status()

输出

{
        "set" : "repset",
        "date" : ISODate("2013-12-29T14:28:35Z"),
        "myState" : 2,
        "syncingTo" : "192.168.0.197:28018",
        "members" : [
                {
                        "_id" : 0,
                        "name" : "192.168.0.197:28017",
                        "health" : 1,
                        "state" : 2,
                        "stateStr" : "SECONDARY",
                        "uptime" : 9072,
                        "optime" : Timestamp(1388324934, 1),
                        "optimeDate" : ISODate("2013-12-29T13:48:54Z"),
                        "self" : true
                },
                {
                        "_id" : 1,
                        "name" : "192.168.0.197:28018",
                        "health" : 1,
                        "state" : 1,
                        "stateStr" : "PRIMARY",
                        "uptime" : 7329,
                        "optime" : Timestamp(1388324934, 1),
                        "optimeDate" : ISODate("2013-12-29T13:48:54Z"),
                        "lastHeartbeat" : ISODate("2013-12-29T14:28:34Z"),
                        "lastHeartbeatRecv" : ISODate("2013-12-29T14:28:34Z"),
                        "pingMs" : 1,
                        "syncingTo" : "192.168.1.138:27017"
                },
                {
                        "_id" : 2,
                        "name" : "192.168.0.197:28019",
                        "health" : 0,
                        "state" : 8,
                        "stateStr" : "(not reachable/healthy)",
                        "uptime" : 0,
                        "optime" : Timestamp(1388324934, 1),
                        "optimeDate" : ISODate("2013-12-29T13:48:54Z"),
                        "lastHeartbeat" : ISODate("2013-12-29T14:28:35Z"),
                        "lastHeartbeatRecv" : ISODate("2013-12-29T14:28:23Z"),
                        "pingMs" : 0,
                        "syncingTo" : "192.168.0.197:28018"
                }
        ],
        "ok" : 1
}

mongo2的标示也会变成repset:Primary> ，即mongo2变成了主节点，故障转移功能实现

做完以上测试，就可以开始做权限和认证

  • 权限

需要配置两种用户，一个是数据库用户管理员，一个是数据库管理
进入主节点

repset:Primary> use admin

配置数据库用户管理员，用来管理所有数据库的用户

repset:Primary> db.createUser(
  {
    user: "admin",
    pwd: "password",
    roles: [ { role: "userAdminAnyDatabase", db: "admin" } ]
  }
)

此权限可进行的操作（暂时只知道以下的）
查看admin库的用户

repset:Primary> show users

查看整个MongoDB全部的用户

repset:Primary> db.system.users.find()

添加admin库的可读写用户

repset:Primary> db.createUser(
   {
     user: "test",
     pwd: "123456",
     roles:
       [
         { role: "readWrite", db: "admin" },
       ]
   }）

该用户只能对该用户新增的集合和数据进行读写，对admin库的system.indexes、system.users、system.version 等集合不具有读写权限
添加edu库的可读写用户

repset:Primary> use edu
repset:Primary> db.createUser(
   {
     user: "edu",
     pwd: "password",
     roles:
       [
         { role: "readWrite", db: "edu" },
       ]
   }
)

注意，MongoDB的用户是基于数据库的，要使用该用户的权限时，必须先进去到该用户权限所属的数据库。比如，你要用edu这个用户去查询edu数据库的东西，必须要先登录到edu库

repset:Primary> use edu
repset:Primary> db.auth("username","password")

查看当前位于哪个库

repset:Primary> db

配置完之后，配置信息将同步到其他节点

  • 认证

配置完用户验证之后，停掉副本集，先用openssl生成密码文件

openssl rand -base64 90 > /home/mongo/mongo1/bin/keyfile

然后将keyfile文件复制到 mongo2和mongo3的bin目录下
注意，需要给keyfile文件赋予600的权限，文件才能被调用

chmod 600 /home/mongo/mongo1/bin/keyfile

然后再MongoDB启动脚本startmongod.sh中加入 keyfile

./mongod --config mongod1.conf --keyFile keyfile

或者在mongod1.conf配置文件中加入keyfile

#数据库文件路径
dbpath=/home/mongo/mongo1/data/

#日志文件
logpath=/home/mongo/mongo1/log/mongod.log

#副本集配置变量
replSet=repset

#修改数据目录存储模式，每个数据库的文件存储在DBPATH指定目录的不同的文件夹中
directoryperdb=true

#定义端口
port=28017

#后台启动
fork=true

#以追加的模式写入日志
logappend=true

#认证文件
keyFile=/home/mongo/mongo1/bin/keyfile

mongo2、mongo3也需要做以上的操作，要保持一致
逐一启动副本，只有经过密码文件认证的节点才能加入；数据库操作也有密码认证，大大提高了安全性

不知一个
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Mongodb集群之副本集集群搭建
11-08
mongodb的集群搭建方式主要有三种，主从，Replica set，sharding, 三种模式各有优劣，适用于不同的场合，副本应用最为广泛，主从现在用的较少，sharding最为完备。副本集是一组维护相同数据集的mongod服务，可提供...
MongoDB常用命令
脚踏实地，仰望星空
01-25 640
成功启动MongoDB后，再打开一个命令行窗口输入mongo，就可以进行数据库的一些操作。 输入help可以看到基本操作命令： show dbs:显示数据库列表 show collections：显示当前数据库中的集合（类似关系数据库中的表） show users：显示用户 use ：切换当前数据库，这和MS-SQL里面的意思一样 db.help()：显示数据库操作命令，里面有很多的命令 db.f...
[Linux下MongoDB权限管理]
weixin_52184735的博客
04-19 966
[Linux下MongoDB权限管理] 一，MongoDB权限介绍 1）mongodb安装完后，默认是不需要用户密码即可登录的，但是往往数据库方面我们会处于安全性的考虑而设置用户密码， 2）MongoDB是没有默认管理员账号的，所以要先添加管理员账号，在开启权限认证。 3）切换到admin数据库，添加的账号才是管理员的账号。 4）用户只能在用户所在的数据库登录，包括管理员账号。 5）管理员可以管理所有的数据库，但是不能直接管理其它数据库，要先在admin数据库中认证才可以，也是为了 安全性考虑。 二 ，Mo
12.MongoDB数据库账户权限配置
FatPuffer
09-06 4368
mongodb权限配置
MongoDB设置登录账号，密码及权限
最新发布
weixin_45167444的博客
05-19 8361
readAnyDatabase（在所有数据库上都有读取数据的权限）、readWriteAnyDatabase（在所有数据库上都有读写数据的权限）、userAdminAnyDatabase（在所有数据库上都有管理user的权限）、dbAdminAnyDatabase（管理所有数据库的权限）；：clusterAdmin（管理机器的最高权限）、clusterManager（管理和监控集群的权限）、clusterMonitor（监控集群的权限）、hostManager（ 管理Server）；
Mongodb数据库
qq_36838700的博客
10-14 143
Mongodb一些操作
MongoDB4.2分片及副本集群搭建
04-21
MongoDB4.2分片及副本集群搭建 MongoDB集群 MongoDB分片 MongoDB副本 MongoDB副本集群
K8s 部署 MongoDB（副本集）
02-03
MongoDB中的副本集(Replica Set)是一组维护相同数据集的mongod服务。 副本集可提供冗余和高可用性，是所有生产部署的基础。也可以说，副本集类似于有自动故障恢复功能的主从集群。通俗的讲就是用多台机器进行同一...
搭建高可用mongodb集群（二）——副本集
02-21
在上一篇文章《搭建高可用MongoDB集群（一）——配置MongoDB》提到了几个问题还没有解决。1.主节点挂了能否自动切换连接？目前需要手工切换。2.主节点的读写压力过大如何解决？3.从节点每个上面的数据都是对数据库...
Mongodb分片副本集集群搭建
04-04
搭建Mongodb分片集群的步骤文档，度娘上很多坑，被坑的可以看看，本文档专门埋坑。
MongoDB 查看所有用户账号信息
热门推荐
独一无二的小个性
11-10 9万+
查看全局所有账户 查看当前库下的账户 在 MongoDB 中创建了很多帐号，怎么查看所有帐号信息？查看全局所有账户 :> use admin switched to db admin > db.auth('admin','123456') 1 > db.system.users.find().pretty() { "_id" : "admin.root", "user" : "
MongoDB主从集群、副本集与分片集群
Experience set us apart!
06-13 3564
MongoDB主从集群、副本集与分片集群的区别
MongoDB日常运维之用户管理
因上努力，果上随缘。但行好事，莫问前程。
05-09 1243
MongoDB 数据库默认是没有用户名及密码的，即无权限访问限制。为了方便数据库的管理和安全，需创建数据库用户。 1，用户的权限 用户中权限的说明： 权限 说明 Read 允许用户读取指定数据库 readWrite 允许用户读写指定数据库 dbAdmin 允许用户在指定数据库中执行管理函数，如索引创建、删除，查看统计或访问 system.profile userAdmin 允许用户向 system.users 集合写入，可以找指定数据库里创建、删除和管理用
遇到问题-----mongodb-------Uncaught TypeError: Cannot read property 'value' of undefined
直到世界的尽头
06-07 1万+
前面我们了解过 在mongodb 中使用js脚本运行。mongodb执行js脚本(一)---shell执行mongodb 执行js脚本(二)---mongovue执行但是写mongodb的js脚本并不是很好调试。 只能逐句检查验证。今天遇到了一个问题。Uncaught TypeError: Cannot read property 'highStudentResultDetails' of und
mongodb副本集搭建详细步骤及异常处理
Rio520的博客
04-05 626
一.环境准备 准备三台服务器，或者在一台服务器上启动三个不同端口的mongodb服务 防火墙，开放对应的端口，否则会报错 1.1关闭selinx [root@localhost ~]# setenforce 0 [root@localhost ~]# vim /etc/sysconfig/selinux SELINUX=disabled 1.2文件目录规划，目录的结构： mongodb ├── bin #可执行文件 ├── data #存放数据库文件 ├── keyfile #存放Keyfile ├──
MongoDB权威指南学习笔记7---MongoDB的副本集
weixin_34167043的博客
08-04 89
2019独角兽企业重金招聘Python工程师标准>>> ...
手把手教你设置MongoDB密码
weixin_30376323的博客
08-29 545
mongodb密码和传统数据如mysql等有些区别： mongodb的用户名和密码是基于特定数据库的，而不是基于整个系统的。所有所有数据库db都需要设置密码。 1. 查看所有数据库(在mongodb新版本里并没有admin数据库，但是并不妨碍第2步操作。) show dbs 2. 进入admin数据库 use admin 3. 创建管理员账户 db.createUser({ user...
二.MongoDB入门-Mongodb权限管理
墨家巨子@俏如来
02-08 1760
1.认识MongDB权限 MongoDB安装完成后，默认是没有权限验证的，默认是不需要输入用户名密码即可登录的，但是往往数据库方面我们会出于安全性的考虑而设置用户名密码。 在MongDB中内置了一些用户角色roles,可以用一个空数组给新用户设定空角色；在roles字段,可以指定内置角色和用户定义的角色。role里的角色可以选： 角色 说明 Read 允许用户读取指定数据库 readWrite 允许用户读写指定数据库 dbAdmin 允许用户在指定数据库中执行管理函数，如索引创建、删
MongoDB主从集群、副本集与分片
YHJ
05-12 1453
在实际生产中，为了防止数据丢失，我们需要搭建主从集群来同步数据；有时候当数据库中的数据量很大的时候，一台服务器无法存储，这时我们需要扩展多台机器来存储我们的数据，这时需要用到MongoDB的分片操作。 转发请标明原文地址：【原文链接】 一、主从复制 对于主从复制的原理，非常简单，简单的说就是几台机器之间进行同步操作，我们在主节点上操作数据，需要同步到其他子节点上。下面我们来实战一下。首先创建一个cluster文件夹，然后在该文件夹中创建两个子文件夹master和slave分别存放主从节点的数据文件。
mongodb集群——分片+副本集
05-18
MongoDB集群中的分片和副本集是两个不同的概念，但它们可以一起使用来实现高可用性和扩展性。 分片（Sharding）是将数据分散存储在多个物理节点上的过程。在MongoDB中，一个分片集合（sharded collection）会被划分...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值