mongodb 集群部署

Mongodb1

 

1、创建目录

mkdir -p /home/wilde/mongodb/conf

mkdir -p /home/wilde/mongodb/mongos/log

mkdir -p /home/wilde/mongodb/config/data

mkdir -p /home/wilde/mongodb/config/log

mkdir -p /home/wilde/mongodb/shard1/data

mkdir -p /home/wilde/mongodb/shard1/log

mkdir -p /home/wilde/mongodb/shard2/data

mkdir -p /home/wilde/mongodb/shard2/log

mkdir -p /home/wilde/mongodb/shard3/data

mkdir -p /home/wilde/mongodb/shard3/log

 

2、config server配置服务器

添加配置文件

vi /home/wilde/mongodb/conf/config.conf

 

## 配置文件内容

pidfilepath = /home/wilde/mongodb/config/log/configsrv.pid

dbpath = /home/wilde/mongodb/config/data

logpath = /home/wilde/mongodb/config/log/congigsrv.log

logappend = true

 

bind_ip = 0.0.0.0

port = 21000

fork = true

 

#declare this is a config db of a cluster;

configsvr = true

 

#副本集名称

replSet=configs

 

#设置最大连接数

maxConns=20000

 

 

启动三台服务器的config server

mongod -f /home/wilde/mongodb/conf/config.conf

 

初始化配置副本集连接

mongo --port 21000

#config变量

config = {

    _id : "configs",

     members : [

         {_id : 0, host : "192.168.0.130:21000" },

{_id : 1, host : "192.168.0.131:21000" },

{_id : 2, host : "192.168.0.132:21000" },

     ]

}

 

#初始化副本集

rs.initiate(config)

 

3、配置分片副本集(三台机器)

设置第一个分片副本集

配置文件

vi /home/wilde/mongodb/conf/shard1.conf

#配置文件内容

#——————————————–

pidfilepath = /home/wilde/mongodb/shard1/log/shard1.pid

dbpath = /home/wilde/mongodb/shard1/data

logpath = /home/wilde/mongodb/shard1/log/shard1.log

logappend = true

 

bind_ip = 0.0.0.0

port = 27001

fork = true

 

#打开web监控

#httpinterface=true

#rest=true

 

#副本集名称

replSet=shard1

 

#declare this is a shard db of a cluster;

shardsvr = true

 

#设置最大连接数

maxConns=20000

 

启动服务器的shard1 server

mongod -f /home/wilde/mongodb/conf/shard1.conf

 

登录任意一台配置服务器，初始化配置副本集

 

mongo --port 27001

#使用admin数据库

use admin

#定义副本集配置，第三个节点的 "arbiterOnly":true 代表其为仲裁节点。

config = {

    _id : "shard1",

     members : [

        {_id : 0, host : "192.168.1.130:27001" },

          {_id : 1, host : "192.168.1.131:27001" },

          {_id : 2, host : "192.168.1.132:27001" , arbiterOnly: true},

]

}

#初始化副本集配置

rs.initiate(config);

 

设置第二，三个分片副本集（参考第一个）

设置第二个分片副本集

配置文件

vi /home/wilde/mongodb/conf/shard2.conf

#配置文件内容

#——————————————–

pidfilepath = /home/wilde/mongodb/shard2/log/shard2.pid

dbpath = /home/wilde/mongodb/shard2/data

logpath = /home/wilde/mongodb/shard2/log/shard2.log

logappend = true

 

bind_ip = 0.0.0.0

port = 27002

fork = true

 

#打开web监控

#httpinterface=true

#rest=true

 

#副本集名称

replSet=shard2

 

#declare this is a shard db of a cluster;

shardsvr = true

 

#设置最大连接数

maxConns=20000

 

启动服务器的shard1 server

mongod -f /home/wilde/mongodb/conf/shard2.conf

 

登录任意一台配置服务器，初始化配置副本集

 

mongo --port 27002

#使用admin数据库

use admin

#定义副本集配置，第三个节点的 "arbiterOnly":true 代表其为仲裁节点。

config = {

    _id : "shard2",

     members : [

        {_id : 0, host : "192.168.0.130:27002" },

          {_id : 1, host : "192.168.0.131:27002" },

          {_id : 2, host : "192.168.0.132:27002" , arbiterOnly: true},

]

}

#初始化副本集配置

rs.initiate(config);

 

4、配置路由服务器 mongos

先启动配置服务器和分片服务器,后启动路由实例启动路由实例:（三台机器）

vi /home/wilde/mongodb/conf/mongos.conf

 

#内容

pidfilepath = /home/wilde/mongodb/mongos/log/mongos.pid

logpath = /home/wilde/mongodb/mongos/log/mongos.log

logappend = true

 

bind_ip = 0.0.0.0

port = 20000

fork = true

 

#监听的配置服务器,只能有1个或者3个 configs为配置服务器的副本集名字

configdb = configs/192.168.1.100:21000,192.168.1.100:31000,192.168.1.100:41000

 

#设置最大连接数

maxConns=20000

 

启动三台服务器的mongos server

mongos -f /home/wilde/mongodb/conf/mongos.conf

 

 

5、启用分片

目前搭建了mongodb配置服务器、路由服务器，各个分片服务器，不过应用程序连接到mongos路由服务器并不能使用分片机制，还需要在程序里设置分片配置，让分片生效。

登陆任意一台mongos

mongo --port 20000

#使用admin数据库

use  admin

#串联路由服务器与分配副本集

sh.addShard("shard1/192.168.1.100:27001,192.168.1.100:37001,192.168.1.100:47001")

sh.addShard("shard2/192.168.1.100:27002,192.168.1.100:37002,192.168.1.100:47002")

...

...

#查看集群状态

sh.status()

 

6、测试

目前配置服务、路由服务、分片服务、副本集服务都已经串联起来了，但我们的目的是希望插入数据，数据能够自动分片。连接在mongos上，准备让指定的数据库、指定的集合分片生效。

#指定testdb分片生效

db.runCommand( { enablesharding :"testdb"});

#指定数据库里需要分片的集合和片键

db.runCommand( { shardcollection : "testdb.table1",key : {id: 1} } )

我们设置testdb的 table1 表需要分片，根据 id 自动分片到 shard1 ，shard2，shard3 上面去。要这样设置是因为不是所有mongodb 的数据库和表 都需要分片！

测试分片配置结果

mongo 127.0.0.1:20000

#使用

testdb use testdb;

#插入测试数据

for (var i = 1; i <= 100000; i++){

db.table1.save({id:i,"test1":"testval1"})

};

#查看分片情况如下，部分无关信息省掉了

db.table1.stats();