第24章 MongoDB 分片教程

第24章 MongoDB 分片教程

---

分片

在Mongodb里面存在另一种集群，就是分片技术,可以满足MongoDB数据量大量增长的需求。

当MongoDB存储海量的数据时，一台机器可能不足以存储数据，也可能不足以提供可接受的读写吞吐量。这时，咱们就可以通过在多台机器上分割数据，使得database系统能存储和处理更多的数据。

---

为什么使用分片

• 复制所有的写入操作到主节点
• 延迟的敏感数据会在主节点查询
• 单个副本集限制在12个节点
• 当请求量巨大时会出现内存不足。
• 本地磁盘不足
• 垂直扩展价格昂贵

---

MongoDB分片

• Shard:

用于存储实际的数据块，实际生产环境中一个shard server角色可由几台机器组个一个replica set承担，防止主机单点故障

• Config Server:

mongod实例，存储了整个 ClusterMetadata，其中包括 chunk信息。

• Query Routers:

前端路由，客户端由此接入，且让整个集群看上去像单一database，前端应用可以透明使用。

---

分片实例

分片结构端口分布如下：

    Shard Server 1：27020
    Shard Server 2：27021
    Shard Server 3：27022
    Shard Server 4：27023
    Config Server ：27100
    Route Process：40000

步骤一：启动Shard Server

    [root@100 /]# mkdir -p /www/mongoDB/shard/s0
    [root@100 /]# mkdir -p /www/mongoDB/shard/s1
    [root@100 /]# mkdir -p /www/mongoDB/shard/s2
    [root@100 /]# mkdir -p /www/mongoDB/shard/s3
    [root@100 /]# mkdir -p /www/mongoDB/shard/log
    [root@100 /]# /usr/local/mongoDB/bin/mongod --port 27020 --dbpath=/www/mongoDB/shard/s0 --logpath=/www/mongoDB/shard/log/s0.log --logappend --fork
    ....
    [root@100 /]# /usr/local/mongoDB/bin/mongod --port 27023 --dbpath=/www/mongoDB/shard/s3 --logpath=/www/mongoDB/shard/log/s3.log --logappend --fork

步骤二： 启动Config Server

    [root@100 /]# mkdir -p /www/mongoDB/shard/config
    [root@100 /]# /usr/local/mongoDB/bin/mongod --port 27100 --dbpath=/www/mongoDB/shard/config --logpath=/www/mongoDB/shard/log/config.log --logappend --fork

**注意：**这里咱们完全可以像启动普通mongodb服务一样启动，不需要添加—shardsvr和configsvr参数。因为这两个参数的作用就是改变启动端口的，所以咱们自行指定了端口就可以。

步骤三： 启动Route Process

    /usr/local/mongoDB/bin/mongos --port 40000 --configdb localhost:27100 --fork --logpath=/www/mongoDB/shard/log/route.log --chunkSize 500

mongos启动参数中，chunkSize这一项是用来指定chunk的大小的，单位是MB，默认大小为200MB.

步骤四： 配置Sharding

接下来，咱们使用MongoDB Shell登录到mongos，添加Shard节点

    [root@100 shard]# /usr/local/mongoDB/bin/mongo admin --port 40000
    MongoDB shell version: 2.0.7
    connecting to: 127.0.0.1:40000/admin
    mongos> db.runCommand({ addshard:"localhost:27020" })
    { "shardAdded" : "shard0000", "ok" : 1 }
    ......
    mongos> db.runCommand({ addshard:"localhost:27029" })
    { "shardAdded" : "shard0009", "ok" : 1 }
    mongos> db.runCommand({ enablesharding:"test" }) #设置分片存储的database
    { "ok" : 1 }
    mongos> db.runCommand({ shardcollection: "test.log", key: { id:1,time:1}})
    { "collectionsharded" : "test.log", "ok" : 1 }

步骤五： 程序代码内无需太大更改，直接按照连接普通的mongodatabase那样，将database连接接入接口40000

本专栏所有文章

第1章 MongoDB 教程	第2章 NoSQL 简介教程
第3章 MongoDB 简介教程	第4章 Windows MongoDB教程
第5章 Linux MongoDB教程	第6章 OSX MongoDB教程
第7章 MongoDB 概念解析教程	第8章 MongoDB 连接教程
第9章 MongoDB 创建数据库教程	第10章 MongoDB 删除数据库教程
第11章 MongoDB 创建集合教程	第12章 MongoDB 删除集合教程
第13章 MongoDB 插入文档教程	第14章 MongoDB 更新文档教程
第15章 MongoDB 删除文档教程	第16章 MongoDB 查询文档教程
第17章 MongoDB 条件操作符教程	第18章 MongoDB $type 操作符教程
第19章 MongoDB Limit与Skip方法教程	第20章 MongoDB 排序教程
第21章 MongoDB 索引教程	第22章 MongoDB 聚合教程
第23章 MongoDB 复制(副本集)教程	第24章 第24章 MongoDB 分片教程教程
第25章 MongoDB 备份与恢复教程	第26章 MongoDB 监控教程
第27章 MongoDB Java教程	第28章 MongoDB PHP 扩展教程
第29章 MongoDB PHP教程	第30章 MongoDB PHP7教程
第31章 Node.js MongoDB教程	第32章 MongoDB 关系教程
第33章 MongoDB 数据库引用教程	第34章 MongoDB 覆盖索引查询教程
第35章 MongoDB 查询分析教程	第36章 MongoDB 原子操作教程
第37章 MongoDB 高级索引教程	第38章 MongoDB 索引限制教程
第39章 MongoDB ObjectId教程	第40章 MongoDB Map Reduce教程
第41章 MongoDB 全文检索教程	第42章 MongoDB 正则表达式教程
第43章 MongoDB 管理工具教程	第44章 MongoDB GridFS教程
第45章 MongoDB 固定集合教程	第46章 MongoDB 自动增长教程

寄语

本文有榴莲酱CSDN原创，欢迎点赞、转载，博客地址：https://blog.csdn.net/qq441540598

• 在我们的生活中，所有的事情都有它存在的意义。当你觉得孤独，那正是认识自己的机会；当你觉得黑暗，那正是发现光芒的机会；当你觉得无助，那正是让你知道内心有多强大的机会。坚持住，在锻造自我中超越自我。新的一天。
• 不要说机会从来没有出现，它出现过多次，只是你舍不得放下自己握着的东西，而没有手去抓住他。午安。
• 孟子曰：“仁者爱人，有礼者敬人。爱人者，人恒爱之；敬人者，人恒敬之。”（《离娄下》）
• 良心是一种内心的感觉，是对于躁动于我们体内的某种异常愿望的抵制。
• 抬头望着天空，我微笑的张开双手坦然面对未来。