一、MongoDB知识涉猎
MongoDB Docs(官方文档)
1.什么是MongoDB?
MongoDB 是由C++语言编写的,是一个基于分布式文件存储的开源数据库系统。
在高负载的情况下,添加更多的节点,可以保证服务器性能。
MongoDB 旨在为WEB应用提供可扩展的高性能数据存储解决方案。
MongoDB 将数据存储为一个文档,数据结构由键值(key=>value)对组成。MongoDB 文档类似于 JSON 对象。字段值可以包含其他文档,数组及文档数组。
2.主要特点
- MongoDB 是一个面向文档存储的数据库,操作起来比较简单和容易。
- 你可以在MongoDB记录中设置任何属性的索引 (如:FirstName="Sameer",Address="8 Gandhi Road")来实现更快的排序。
- 你可以通过本地或者网络创建数据镜像,这使得MongoDB有更强的扩展性。
- 如果负载的增加(需要更多的存储空间和更强的处理能力) ,它可以分布在计算机网络中的其他节点上这就是所谓的分片。
- Mongo支持丰富的查询表达式。查询指令使用JSON形式的标记,可轻易查询文档中内嵌的对象及数组。
- MongoDb 使用update()命令可以实现替换完成的文档(数据)或者一些指定的数据字段 。
- Mongodb中的Map/reduce主要是用来对数据进行批量处理和聚合操作。
- Map和Reduce。Map函数调用emit(key,value)遍历集合中所有的记录,将key与value传给Reduce函数进行处理。
- Map函数和Reduce函数是使用Javascript编写的,并可以通过db.runCommand或mapreduce命令来执行MapReduce操作。
- GridFS是MongoDB中的一个内置功能,可以用于存放大量小文件。
- MongoDB允许在服务端执行脚本,可以用Javascript编写某个函数,直接在服务端执行,也可以把函数的定义存储在服务端,下次直接调用即可。
- MongoDB支持各种编程语言:RUBY,PYTHON,JAVA,C++,PHP,C#等多种语言。
- MongoDB安装简单。
二、安装部署MongoDB
1.上传并解压MongoDB安装包
[root@vastdata01 src]# pwd
/usr/local/src
[root@vastdata01 src]# ll
总用量 84788
-rw-r--r-- 1 root root 86822375 8月 15 23:27 mongodb-linux-x86_64-3.6.3.tgz
[root@vastdata01 src]# tar -zxvf mongodb-linux-x86_64-3.6.3.tgz
mongodb-linux-x86_64-3.6.3/README
mongodb-linux-x86_64-3.6.3/THIRD-PARTY-NOTICES
mongodb-linux-x86_64-3.6.3/MPL-2
mongodb-linux-x86_64-3.6.3/GNU-AGPL-3.0
mongodb-linux-x86_64-3.6.3/bin/mongodump
mongodb-linux-x86_64-3.6.3/bin/mongorestore
mongodb-linux-x86_64-3.6.3/bin/mongoexport
mongodb-linux-x86_64-3.6.3/bin/mongoimport
mongodb-linux-x86_64-3.6.3/bin/mongostat
mongodb-linux-x86_64-3.6.3/bin/mongotop
mongodb-linux-x86_64-3.6.3/bin/bsondump
mongodb-linux-x86_64-3.6.3/bin/mongofiles
mongodb-linux-x86_64-3.6.3/bin/mongoreplay
mongodb-linux-x86_64-3.6.3/bin/mongoperf
mongodb-linux-x86_64-3.6.3/bin/mongod
mongodb-linux-x86_64-3.6.3/bin/mongos
mongodb-linux-x86_64-3.6.3/bin/mongo
mongodb-linux-x86_64-3.6.3/bin/install_compass
[root@vastdata01 src]# ll
总用量 84788
drwxr-xr-x 3 root root 91 8月 15 23:28 mongodb-linux-x86_64-3.6.3
-rw-r--r-- 1 root root 86822375 8月 15 23:27 mongodb-linux-x86_64-3.6.3.tgz
2.创建安装目录并复制mongodb解压文件
[root@vastdata01 ~]# mkdir -p /data/mongodb/{single,key}/{config,data,log}
[root@vastdata01 ~]# cp -r /usr/local/src/mongodb-linux-x86_64-3.6.3/* /data/mongodb/
[root@vastdata01 ~]# ll /data/mongodb/
总用量 116
drwxr-xr-x 2 root root 248 8月 15 23:36 bin
-rw-r--r-- 1 root root 34520 8月 15 23:36 GNU-AGPL-3.0
drwxr-xr-x 5 root root 43 8月 15 23:36 key
-rw-r--r-- 1 root root 16726 8月 15 23:36 MPL-2
-rw-r--r-- 1 root root 2195 8月 15 23:36 README
drwxr-xr-x 5 root root 43 8月 15 23:36 single
-rw-r--r-- 1 root root 57190 8月 15 23:36 THIRD-PARTY-NOTICES
3.配置keyfile文件
创建一个生成keyfile的脚本:
[root@vastdata01 ~]# vim /data/mongodb/key/create_key.sh
[root@vastdata01 ~]# cat /data/mongodb/key/create_key.sh
cat /dev/urandom | LC_ALL=C tr -dc "[:alnum:]" | fold -w 10 |head -1 > /tmp/key.txt
keystring=`cat /tmp/key.txt`
echo $keystring > /data/mongodb/key/mongod
chmod 600 /data/mongodb/key/*
[root@vastdata01 ~]# chmod +x /data/mongodb/key/create_key.sh
[root@vastdata01 ~]# /data/mongodb/key/create_key.sh
[root@vastdata01 ~]# ll /data/mongodb/key/
总用量 8
drw------- 2 root root 6 8月 15 23:36 config
-rw------- 1 root root 186 8月 15 23:43 create_key.sh
drw------- 2 root root 6 8月 15 23:36 data
drw------- 2 root root 6 8月 15 23:36 log
-rw------- 1 root root 11 8月 15 23:45 mongod
4.创建配置文件mongodb.conf
常用配置参数含义
dbpath | 数据库数据存放目录 |
logpath | 数据库日志存放目录 |
logappend | 以追加的方式记录日志 |
port | 端口号:默认为27017 |
fork | 以守护进程的方式后台运行MongoDB,创建服务器进程 |
auth | 开启用户认证 |
nohttpinterface | 关闭http接口:默认关闭http端口访问 |
bind_ip | mongodb所绑定的IP地址 |
journal | 启用日志文件,默认启用 |
quiet | 可过滤掉部分无用的日志信息,若需要调试使用请设置为false |
keyFile | 集群的私钥的完整路径,只对于Replica Set 架构有效 |
oplogSize | 设置oplog的大小(MB) |
replSet | 设置副本集名称 |
configsvr | 声明这是一个集群的config服务,默认端口27019,默认目录/data/configdb |
shardsvr | 声明这是一个集群的分片,默认端口27018 |
[root@vastdata01 ~]# vim /data/mongodb/single/config/mongodb.conf
[root@vastdata01 ~]# cat /data/mongodb/single/config/mongodb.conf
dbpath=/data/mongodb/single/data
logpath=/data/mongodb/single/log/mongodb.log
port=27017
fork=true
logappend=true
auth=true
5.添加MongoDb PATH路径
[root@vastdata01 ~]# echo export PATH=/data/mongodb/bin:$PATH >> /etc/profile
[root@vastdata01 ~]# source /etc/profile
6.启动MongoDB服务器进程-mongod,并登录mongo shell
[root@vastdata01 ~]# mongod -f /data/mongodb/single/config/mongodb.conf
about to fork child process, waiting until server is ready for connections.
forked process: 20909
child process started successfully, parent exiting
[root@vastdata01 ~]# mongo --port 27017
MongoDB shell version v3.6.3
connecting to: mongodb://127.0.0.1:27017/
MongoDB server version: 3.6.3
>
7.添加管理用户并验证
> use admin
switched to db admin
> db.createUser({user:"a",pwd:"a",roles:[{role:"root",db:"admin"}]})
Successfully added user: {
"user" : "a",
"roles" : [
{
"role" : "root",
"db" : "admin"
}
]
}
> db.auth('a','a');
1
8.关闭数据库
> use admin
switched to db admin
> db.shutdownServer()
server should be down...
2019-08-16T00:28:09.964+0800 I NETWORK [thread1] trying reconnect to 127.0.0.1:27017 (127.0.0.1) failed
2019-08-16T00:28:09.964+0800 W NETWORK [thread1] Failed to connect to 127.0.0.1:27017, in(checking socket for error after poll), reason: Connection refused
2019-08-16T00:28:09.964+0800 I NETWORK [thread1] reconnect 127.0.0.1:27017 (127.0.0.1) failed failed
> exit
bye
9.设置mongo shell提示符
mongo shell的提示符 在连接不同的节点时,mongo shell的提示符不一样:
单节点默认的提示符是:”>”;
复制集默认的提示符会显示复制集的名字和复制集的状态,比如:“replsetname:PRIMARY>”;
路由mongos默认的提示符是:”mongos>”
我们可以通过设置prompt变量来自定义提示符。
在连接单实例时,显示数据库的名字和机器名;
在连接复制集时,显示复制集的状态、当前连接的数据库;
在连接mongos时,既显示当前连接的是mongos,又显示当前连接的数据库名;
将上面的需求组合起来,设置成自定义的mongo shell的提示符:
[root@vastdata01 ~]# vim ~/.mongorc.js
[root@vastdata01 ~]# cat ~/.mongorc.js
[javascript] view plain copy
var host = db.serverStatus().host;
states = ["STARTUP", "PRIMARY", "SECONDARY", "RECOVERING", "FATAL",
"STARTUP2", "UNKNOWN", "ARBITER", "DOWN", "ROLLBACK"];
var prompt = function() {
result = db.adminCommand({isdbgrid : 1});
if (result.ok == 1) {
return "mongos:"+db+"> ";
}
result = db.isMaster();
if (result.ismaster) {
return db+"@"+host+"> ";
}
result = db.adminCommand({replSetGetStatus : 1})
return states[result.myState]+":"+db+"> ";
}
mongo在启动时会自动加载用户的home目录下的.mongorc.js文件,
所以可以把上面的代码存放到用户home目录下的.mongorc.js文件里。
在每次启动mongo shell的时候,就会自动加载自定义的提示符。
如果不需要加载自定义的提示符,可以在启动mongo shell时使用--norc选项。
10.启动mongod服务器进程,以安全认证的方式登陆数据库
[root@vastdata01 ~]# mongod -f /data/mongodb/single/config/mongodb.conf
about to fork child process, waiting until server is ready for connections.
forked process: 21183
child process started successfully, parent exiting
[root@vastdata01 ~]# mongo --port 27017 -u "a" -p "a" --authenticationDatabase "admin"
MongoDB shell version v3.6.3
connecting to: mongodb://127.0.0.1:27017/
MongoDB server version: 3.6.3
Server has startup warnings:
2019-08-16T00:41:45.772+0800 I CONTROL [initandlisten] ** WARNING: You are running this process as the root user, which is not recommended.
2019-08-16T00:41:45.772+0800 I CONTROL [initandlisten]
2019-08-16T00:41:45.773+0800 I CONTROL [initandlisten] ** WARNING: This server is bound to localhost.
2019-08-16T00:41:45.773+0800 I CONTROL [initandlisten] ** Remote systems will be unable to connect to this server.
2019-08-16T00:41:45.773+0800 I CONTROL [initandlisten] ** Start the server with --bind_ip <address> to specify which IP
2019-08-16T00:41:45.773+0800 I CONTROL [initandlisten] ** addresses it should serve responses from, or with --bind_ip_all to
2019-08-16T00:41:45.773+0800 I CONTROL [initandlisten] ** bind to all interfaces. If this behavior is desired, start the
2019-08-16T00:41:45.773+0800 I CONTROL [initandlisten] ** server with --bind_ip 127.0.0.1 to disable this warning.
2019-08-16T00:41:45.773+0800 I CONTROL [initandlisten]
2019-08-16T00:41:45.774+0800 I CONTROL [initandlisten]
2019-08-16T00:41:45.774+0800 I CONTROL [initandlisten] ** WARNING: /sys/kernel/mm/transparent_hugepage/enabled is 'always'.
2019-08-16T00:41:45.774+0800 I CONTROL [initandlisten] ** We suggest setting it to 'never'
2019-08-16T00:41:45.774+0800 I CONTROL [initandlisten]
2019-08-16T00:41:45.774+0800 I CONTROL [initandlisten] ** WARNING: /sys/kernel/mm/transparent_hugepage/defrag is 'always'.
2019-08-16T00:41:45.774+0800 I CONTROL [initandlisten] ** We suggest setting it to 'never'
2019-08-16T00:41:45.774+0800 I CONTROL [initandlisten]
test@vastdata01.us.oracle.com>