MongoDB分片集群搭建

MongoDB 分片
在Mongodb里面存在另一种集群，就是分片技术,可以满足MongoDB数据量大量增长的需求。
当MongoDB存储海量的数据时，一台机器可能不足以存储数据，也可能不足以提供可接受的读写吞吐量。这时，我们就可以通过在多台机器上分割数据，使得数据库系统能存储和处理更多的数据。

 

为什么使用分片

• 复制所有的写入操作到主节点
• 延迟的敏感数据会在主节点查询
• 单个副本集限制在12个节点
• 当请求量巨大时会出现内存不足。
• 本地磁盘不足
• 垂直扩展价格昂贵

 

MongoDB中使用分片集群结构分布

 

上图中主要有如下所述三个主要组件：

• Shard:  用于存储实际的数据块，实际生产环境中一个shard server角色可由几台机器组个一个replica set承担，防止主机单点故障
• Config Server:  mongod实例，存储了整个 ClusterMetadata，其中包括 chunk信息。
• mongos:数据路由，和客户端打交道的模块。mongos本身没有任何数据，他也不知道该怎么处理这数据，去找config server

 

规划

10个实例：38017-38026
（1）configserver:38018-38020
3台构成的复制集（1主两从，不支持arbiter）38018-38020（复制集名字configsvr）
（2）shard节点：
sh1：38021-23    （1主两从，其中一个节点为arbiter，复制集名字sh1）
sh2：38024-26    （1主两从，其中一个节点为arbiter，复制集名字sh2）
（3） mongos:
38017

 

Shard节点配置过程

目录创建

mkdir -p /mongodb/{38021,38022,38023,38024,38025,38026}/{log,data,conf}

 

修改配置文件

第一组复制集搭建21~23（1主 1从 1选举Arb）

cat >  /mongodb/38021/conf/mongodb.conf