关于MongoDB
mongodb的集群搭建方式主要有三种,主从模式,Replica set模式,sharding模式, 三种模式各有优劣,适用于不同的场合,属Replica set应用最为广泛,主从模式现在用的较少,sharding模式最为完备,但配置维护较为复杂,本文以Replica set为例
![fe4994576ff8aef8191f8d42e2ef7969.png](https://i-blog.csdnimg.cn/blog_migrate/abc037e4e373f84ccba061677b70e3dd.jpeg)
其中Replica Set模式中三类角色有必要知道下:
主节点[Primary]
接收所有的写请求,然后把修改同步到所有Secondary。一个Replica Set只能有一个Primary节点,当Primary挂掉后,其他Secondary或者Arbiter节点会重新选举出来一个主节点。默认读请求也是发到Primary节点处理的,需要转发到Secondary需要客户端修改一下连接配置。
副本节点[Secondary]
与主节点保持同样的数据集。当主节点挂掉的时候,参与选主。
仲裁者[Arbiter]
不保有数据,不参与选主,只进行选主投票。使用Arbiter可以减轻数据存储的硬件需求,Arbiter跑起来几乎没什么大的硬件资源需求,但重要的一点是,在生产环境下它和其他数据节点不要部署在同一台机器上。
注意,一个自动failover的Replica Set节点数必须为奇数,目的是选主投票的时候要有一个大多数才能进行选主决策。
搭建集群
了解了基本概念之后,就开始尝试搭建集群,为了更好的理解,特意找了三台测试机进行部署。
前期准备
首先准备三台测试机:
10.100.1.101 主节点(master) 10.100.1.102 备节点(slave) 10.100.1.103 仲裁点(arbiter)
然后就是mongo的安装包(由于线上用的是3.4.2的版本,所以保持统一)
curl -O https://fastdl.mongodb.org/linux/mongodb-linux-x86_64-3.4.2.tgz
安装mongo
这里统一安装在/usr/local/mongodb下。
首先解压并重命名:
tar -zxvf mongodb-linux-x86_64-3.0.6.tgz mv mongodb-linux-x86_64-3.4.2/ /usr/local/mongodb
然后在/mongodb下新建几个文件:
#存放mongo配置文件mkdir -p conf #存放日志文件mkdir -p logs #存放数据文件mkdir -p data
这里需要注意下,配置文件中配置的文件路径一定要存在,不然在启动mongo时会出错,mongo启动时也不会自动生成。
接着分配创建配置文件:
主节点:mongodb_master.conf
#master.confdbpath=/usr/local/mongodb/datalogpath=/usr/local/mongodb/logs/mongodb.logpidfilepath=/usr/local/mongodb/master.piddirectoryperdb=truelogappend=truereplSet=testdbport=27017oplogSize=100fork=truenoprealloc=true
备份节点:vi mongodb_slave.conf
#slave.confdbpath=/usr/local/mongodb/datalogpath=/usr/local/mongodb/logs/mongodb.logpidfilepath=/usr/local/mongodb/master.piddirectoryperdb=truelogappend=truereplSet=testdbport=27017oplogSize=100fork=truenoprealloc=true
仲裁点: vi mongodb_arbiter.conf
#arbiter.confdbpath=/usr/local/mongodb/datalogpath=/usr/local/mongodb/logs/mongodb.logpidfilepath=/usr/local/mongodb/master.piddirectoryperdb=truelogappend=truereplSet=testdbport=27017oplogSize=100fork=truenoprealloc=true
在使用上只是最基本的配置,实际场景中可以根据自己的业务需求进行配置,其他参数供参考:
--quiet # 安静输出--port arg # 指定服务端口号,默认端口27017--bind_ip arg # 绑定服务IP,若绑定127.0.0.1,则只能本机访问,不指定默认本地所有IP--logpath arg # 指定MongoDB日志文件,注意是指定文件不是目录--logappend # 使用追加的方式写日志--pidfilepath arg # PID File 的完整路径,如果没有设置,则没有PID文件--keyFile arg # 集群的私钥的完整路径,只对于Replica Set 架构有效--unixSocketPrefix arg # UNIX域套接字替代目录,(默认为 /tmp)--fork # 以守护进程的方式运行MongoDB,创建服务器进程--auth # 启用验证--cpu # 定期显示CPU的CPU利用率和iowait--dbpath arg # 指定数据库路径--diaglog arg # diaglog选项 0=off 1=W 2=R 3=both 7=W+some reads--directoryperdb # 设置每个数据库将被保存在一个单独的目录--journal # 启用日志选项,MongoDB的数据操作将会写入到journal文件夹的文件里--journalOptions arg # 启用日志诊断选项--ipv6 # 启用IPv6选项--jsonp # 允许JSONP形式通过HTTP访问(有安全影响)--maxConns arg # 最大同时连接数 默认2000--noauth # 不启用验证--nohttpinterface # 关闭http接口,默认关闭27018端口访问--noprealloc # 禁用数据文件预分配(往往影响性能)--noscripting # 禁用脚本引擎--notablescan # 不允许表扫描--nounixsocket # 禁用Unix套接字监听--nssize arg (=16) # 设置信数据库.ns文件大小(MB)--objcheck # 在收到客户数据,检查的有效性,--profile arg # 档案参数 0=off 1=slow, 2=all--quota # 限制每个数据库的文件数,设置默认为8--quotaFiles arg # number of files allower per db, requires --quota--rest # 开启简单的rest API--repair # 修复所有数据库run repair on all dbs--repairpath arg # 修复库生成的文件的目录,默认为目录名称dbpath--slowms arg (=100) # value of slow for profile and console log--smallfiles # 使用较小的默认文件--syncdelay arg (=60) # 数据写入磁盘的时间秒数(0=never,不推荐)--sysinfo # 打印一些诊断系统信息--upgrade # 如果需要升级数据库--fastsync # 从一个dbpath里启用从库复制服务,该dbpath的数据库是主库的快照,可用于快速启用同步--autoresync # 如果从库与主库同步数据差得多,自动重新同步,--oplogSize arg # 设置oplog的大小(MB)--master # 主库模式--slave # 从库模式--source arg # 从库 端口号--only arg # 指定单一的数据库复制--slavedelay arg #设置从库同步主库的延迟时间--replSet arg # 设置副本集名称 --configsvr # 声明这是一个集群的config服务,默认端口27019,默认目录/data/configdb--shardsvr # 声明这是一个集群的分片,默认端口27018--noMoveParanoia # 关闭偏执为moveChunk数据保存
节点配置完之后就可以启动mongo了,cd到bin目录下:
./mongod -f /etc/mongodb_master.conf./mongod -f /etc/mongodb_slave.conf./mongod -f /etc/mongodb_arbiter.conf
![a5d2e8f7f27f640d0315d31cc95af10a.png](https://i-blog.csdnimg.cn/blog_migrate/10879069a861f6f61f275cf9e5622c67.jpeg)
配置节点
最后,就需要配置主、备、仲裁节点了。首先我们选择一台服务器进行连接:
./mongo 10.100.1.101:27017 >use admin
![25982a3fef33f046b7bf48d2f0772251.png](https://i-blog.csdnimg.cn/blog_migrate/20da7035d1d47945bb47de59f3442fdb.jpeg)
然后进行配置:
cfg={ _id:"testdb