MongoDB 学习笔记八 复制、分片、备份与恢复、监控
MongoDB复制(副本集)
MongoDB复制是将数据同步在多个服务器的过程。
复制提供了数据的冗余备份,并在多个服务器上存储数据副本,提高了数据的可用性,并可以保证数据的安全性。
复制还允许您从硬件故障和服务中断中恢复数据。
什么是复制?
- 保障数据的安全性
- 数据高可用性(24*7)
- 灾难恢复
- 无需停机维护(如备份、重建索引、压缩)
- 分布式读取数据
MongoDB 复制原理
MongoDB 的复制至少需要两个节点,其中一个是主节点,负责处理客户端请求,其余的都是从节点,负责复制主节点上的数据。
MongoDB 各个节点常见的搭配方式为:一主一从、一主多从。
主节点记录在其上的所有操作 oplog,从节点定期轮询主节点获取这些操作,然后对自己的数据副本执行这些操作,从而保证从节点的数据与主节点一致。
MongoDB 复制结构如图所示:
以上结构图中,客户端从主节点读取数据,在客户端写入数据到主节点时,主节点与从节点进行数据交互(保障数据的一致性)
副本集特征:
- N个节点的集群
- 任何节点可作为主节点
- 所有写入凑走都在主节点上
- 自动故障转移
- 自动恢复
MongoDB 副本集设置
现在我们通过指定 --replSet 选项来启动 MongoDB。-- replSet 基本语法格式如下:
mongod --port "PORT" --dbpath "YOUR_DB_DATA_PATH" --replSet "REPLICA_SET_INSTANCE_NAME"
实例
mongod --port 27017 --dbpath "D:\set up\mongodb\data" --replSet rs0
以上实例会启动一个名为 rs0 的 MongoDB实例,其端口为 27017.
启动后打开命令提示框并连接上 MongoDB 服务。
在 MongoDB 客户端使用命令 rs.initate()来启动一个新的副本集。
我们可以使用 rs.conf 来查看副本集的配置
查看副本集状态使用 rs.status()命令
副本集添加成员
添加副本集的成员,我么粗腰使用多台服务器来启动 MongoDB服务。进入MongoDB客户端,并使用 rs.add()方法来添加副本集的成员。
语法
rs.add()命令基本语法格式如下:
>rs.add(HOST_NAME:PORT)
实例
假设你已经启动了一个名为 mongod1.net,端口为 27017 的 MongoDB 服务,在客户端命令窗口使用 rs.add()命令将其添加到副本集中,命令如下所示:
>rs.add("mongod1.net:27017")
>
MongoDB 中你只能通过主节点将 MongoDB服务添加到副本集中,判断当前运行的 MongoDB 服务是否为主节点可以使用命令 db.isMaster()。
MongoDB的副本集与我们常见的主从有所不同,助兴在主机宕机后所有服务将停止,而副本集在主机宕机后,副本会接管主节点称为主节点,不会出现宕机的情况。
MongoDB 分片
分片
在 MongoDB 里面存在另一种集群,就是分片技术,可以满足 MongoDB数据量大量增长的需求。
当 MongoDB 存储海量的数据时,一台机器可能不足以存储数据,也可能不足以提供可接受的读写吞吐量。这时,我们就可以通过在多台机器行分割数据,使得数据库系统能存储和处理更多的数据。
为什么使用分片
- 复制所有的写入操作到主节点
- 延迟的敏感数据会在主节点查询
- 单个副本集限制在12个节点
- 党请求来个巨大时会出现内存不足。
- 本地磁盘不足
- 垂直货站价格昂贵
MongoDB 分片
下图展示了在 MongoDB 中使用分片集群结构分布:
上图中主要有如下所述的三个主要组件:
-
Shard:
用于存储实际的数据块,实际生产环境中一个 shard server角色可由几台机器组个 replica set 承担,放置主机单点故障 -
Config Server:
mongod 实例ÿ