冯毅

若有恒,何须三更起半夜眠;最无益,莫过一日曝十日寒。

MongoDB集群,解决数据不分片问题

 

http://blog.csdn.net/fengyily/article/details/7388926 中配置的MongoDB集群,进行数据插入,并查看集合状态时发现两个问题:

 

1、集合中的数据不会分片。

    配置了shard1/shard2/shard3三个分片,但数据只会集中在集合所在的分片上。

 

2、数据插入效率低下。

    采用for循环批量插入20万数据时,发现每秒只能插入100,200条,无法忍受的性能。

 

 

经过分析mongos的日志mongos.log,发现其中一台存在以下日志信息:

Thu Mar 29 01:05:18 [initandlisten] connection accepted from 192.168.1.190:52865 #345
Thu Mar 29 01:05:18 [conn345] authenticate: { authenticate: 1, nonce: "c56c219dd93277e1", user: "__system", key: "f85f00f59c9979af52c8e2f3a854ac9e" }
Thu Mar 29 01:05:46 [conn344] end connection 192.168.1.191:38281
Thu Mar 29 01:05:46 [initandlisten] connection accepted from 192.168.1.191:38289 #346
Thu Mar 29 01:05:46 [conn346] authenticate: { authenticate: 1, nonce: "2c2e6e5a47d9465c", user: "__system", key: "ef913dd4bd6748603842ba313c2437fe" }
Thu Mar 29 01:05:48 [conn345] end connection 192.168.1.190:52865
Thu Mar 29 01:05:48 [initandlisten] connection accepted from 192.168.1.190:52874 #347
Thu Mar 29 01:05:48 [conn347] authenticate: { authenticate: 1, nonce: "a6a21ef57b4e8123", user: "__system", key: "8057fff6fb913bfda00aece41ad44b71" }

 

其中还有一台的mongos.log提示时间不一致。

通过将三台mongodb服务器的时间同步后,再进行测试一切恢复正常。以上两个问题都得到有效的解决。

 

这也许是mongodb存在的一个小BUG,当各分片服务器时间不一致时,会导致数据分片与插入效率。这也说明,MongoDB数据库数据分片机制与服务器时间相关。具体得进一步分析源码。

阅读更多
个人分类: MongoDB
上一篇MongoDB分片群集(windows)
下一篇MongoDB过程中返回游标的方式
想对作者说点什么? 我来说一句

没有更多推荐了,返回首页

关闭
关闭