目录
一、MongoDB简介
1.1 评论数据特点分析
评论两项功能存在以下特点:
(1)数据量大
(2)写入操作频繁
(3)价值较低
对于这样的数据,更适合使用MongoDB来实现数据的存储。
1.2 什么是MongonDB
MongoDB 是一个跨平台的,面向文档的数据库,是当前 NoSQL 数据库产品中最热门的一种。它介于关系数据库和非关系数据库之间,是非关系数据库当中功能最丰富,最像关系数据库的产品。它支持的数据结构非常松散,是类似 JSON 的 BSON 格式,因此可以存储比较复杂的数据类型。MongoDB 的官方网站地址是:https://www.mongodb.com/
1.3 MongonDB特点
MongoDB 最大的特点是他支持的查询语言非常强大,其语法有点类似于面向对象的查询语言,几乎可以实现类似关系数据库单表查询的绝大部分功能,而且还支持对数据建立索引。它是一个面向集合的,模式自由的文档型数据库。具体特点总结如下:(1)面向集合存储,易于存储对象类型的数据
(2)模式自由
(3)支持动态查询
(4)支持完全索引,包含内部对象
(5)支持复制和故障恢复
(6)使用高效的二进制数据存储,包括大型对象(如视频等)
(7)自动处理碎片,以支持云计算层次的扩展性
(8)支持 Python,PHP,Ruby,Java,C,C#,Javascript,Perl 及 C++语言的驱动程序,社区中也提供了对 Erlang 及.NET 等平台的驱动程序
(9) 文件存储格式为 BSON(一种 JSON 的扩展)
1.4 MongonDB体系结构
MongoDB 的逻辑结构是一种层次结构。主要由:文档(document)、集合(collection)、数据库(database)这三部分组成的。逻辑结构是面向用户的,用户使用 MongoDB 开发应用程序使用的就是逻辑结构。
(1)MongoDB 的文档(document),相当于关系数据库中的一行记录。
(2)多个文档组成一个集合(collection),相当于关系数据库的表。
(3)多个集合(collection),逻辑上组织在一起,就是数据库(database)。
(4)一个 MongoDB 实例支持多个数据库(database)。
文档(document)、集合(collection)、数据库(database)的层次结构如下图:
下表是MongoDB与MySQL数据库逻辑结构概念的对比
MongoDB | MySQL |
---|---|
数据库(database) | 数据库(database) |
集合(collections) | 表(table) |
文档(document) | 行(row) |
1.5 数据类型
基本数据类型null:用于表示空值或者不存在的字段,{“x”:null}
布尔型:布尔类型有两个值true和false,{“x”:true}
数值:shell默认使用64为浮点型数值。{“x”:3.14}或{“x”:3}。对于整型值,可以使用NumberInt(4字节符号整数)或NumberLong(8字节符号整数),{“x”:NumberInt(“3”)}{“x”:NumberLong(“3”)}
字符串:UTF-8字符串都可以表示为字符串类型的数据,{“x”:“呵呵”}
日期:日期被存储为自新纪元依赖经过的毫秒数,不存储时区,{“x”:new Date()}
正则表达式:查询时,使用正则表达式作为限定条件,语法与JavaScript的正则表达式相同,{“x”:/[abc]/}
数组:数据列表或数据集可以表示为数组,{“x”: [“a“,“b”,”c”]}
内嵌文档:文档可以嵌套其他文档,被嵌套的文档作为值来处理,{“x”:{“y”:3 }}
对象Id:对象id是一个12字节的字符串,是文档的唯一标识,{“x”: objectId() }
二进制数据:二进制数据是一个任意字节的字符串。它不能直接在shell中使用。如果要将非utf-字符保存到数据库中,二进制数据是唯一的方式。
代码:查询和文档中可以包括任何JavaScript代码,{“x”:function(){/…/}}
二、走进MongoDB
2.1 MongoDB安装与启动
查看菜鸟教程:http://www.runoob.com/mongodb/mongodb-tutorial.html
centos 7下安装mongodb
启动:
./mongod --dbpath=/leyou/mongodb/data --logpath=/leyou/mongodb/logs/logs --logappend --port=27017 --bind_ip=0.0.0.0 --fork
2.2 常用命令
2.2.1 选择和创建数据库
选择和创建数据库的语法格式:
use 数据库名称
如果数据库不存在则自动创建以下语句创建spit数据库
use spit
2.2.2 插入与查询文档
插入文档的语法格式:
db.集合名称.insert(数据);
测试:
db.spit.insert({content:"飘来荡去",userid:"1011",nickname:"飘来荡去",visits:NumberInt(902)})
以上实例中 spit 是集合名,如果该集合不在该数据库中, MongoDB 会自动创建该集合并插入文档。
查询集合的语法格式:
db.集合名称.find
测试:
db.spit.find()
这里会发现每条文档会有一个叫_id的字段,这个相当于原来关系数据库中表的主键,当在插入文档记录时没有指定该字段,MongoDB会自动创建,其类型是ObjectID类型。如果在插入文档记录时指定该字段也可以,其类型可以是ObjectID类型,也
可以是MongoDB支持的任意类型。
输入以下测试语句:
条件查询:
如果想按一定条件来查询,比如想查询userid为1011的记录,怎么办?很简单!只要在find()中添加参数即可,参数也是json格式,如下:
如果只需要返回符合条件的第一条数据,可以使用findOne命令来实现:
如果想返回指定条数的记录,可以在find方法后调用limit来返回结果,例如:
2.2.3 修改与删除文档
修改文档的语法结构:
db.集合名称.update(条件,修改后的数据)
如果想修改_id为1的记录,浏览量为1000,输入以下语句:
db.spit.update({_id:"1"},{visits:NumberInt(1000)})
执行后,会发现,这条文档除了visits字段其它字段都不见了,为了解决这个问题,需要使用修改器$set来实现,命令如下:
db.spit.update({_id:"2"},{$set:{visits:NumberInt(2000)}})
删除文档的语法结构:
db.集合名称.remove(条件)
以下语句可以将数据全部删除,请慎用
db.spit.remove({})
如果删除visits=902的记录,输入以下语句
db.spit.remove({visits:902})
2.2.4 统计条数
统计记录条件使用count()方法。以下语句统计spit集合的记录数:
db.spit.count()
如果按条件统计 ,例如:统计userid为1011的记录条数
db.spit.count({userid:"1011"})
2.2.5 模糊查询
MongoDB的模糊查询是通过正则表达式的方式实现的。格式为:
/模糊查询字符/
例如,要查询评论内容包含“好极了”的所有文档,代码如下:
db.spit.find({content:/好极了/})
如果要查询评论内容中以“优惠”开头的,代码如下:
db.spit.find({content:/^优惠/})
2.2.6 大于 小于 不等于
<, <=, >, >= 这个操作符也是很常用的,格式如下:
db.集合名称.find({ "field" : { $gt: value }}) // 大于: field > value
db.集合名称.find({ "field" : { $lt: value }}) // 小于: field < value
db.集合名称.find({ "field" : { $gte: value }}) // 大于等于: field >= value
db.集合名称.find({ "field" : { $lte: value }}) // 小于等于: field <= value
db.集合名称.find({ "field" : { $ne: value }}) // 不等于: field != value
示例:查询浏览次数大于1000的记录:
db.spit.find({visits:{$gt:1000}})
2.2.7 包含与不包含
包含使用$in操作符。
示例:查询评论集合中userid字段包含1011和1012的文档
db.spit.find({userid:{$in:["1011","1012"]}})
不包含使用$nin操作符。
示例:查询评论集合中userid字段不包含1011和1012的文档
db.spit.find({userid:{$nin:["1011","1012"]}})
2.2.8 条件连接
如果需要查询同时满足两个以上条件,需要使用$and操作符将条件进行关联。(相当于SQL的and)格式为:
$and:[ { },{ },{ }]
示例:查询评论集合中visits大于等于900 并且小于1000的文档
db.spit.find({$and:[ {visits:{$gte:900}} ,{visits:{$lt:1000} }]})
如果两个以上条件之间是或者的关系,我们使用 操作符进行关联,与前面and的使用方式相同。格式为:
$or:[ { },{ },{ }]
示例:查询吐槽集合中userid为1013,或者浏览量小于2000的文档记录
db.spit.find({$or:[ {userid:"1013"} ,{visits:{$lt:2000} }]})
2.2.9 列值增长
如果想实现对某列值在原有值的基础上进行增加或减少,可以使用$inc运算符来实现
db.spit.update({_id:"2"},{$inc:{visits:NumberInt(1)}})
三、操作MongoDB
3.1 mongodb-driver
mongodb-driver是mongo官方推出的java连接mongoDB的驱动包,相当于JDBC驱动。通过一个入门的案例来了解mongodb-driver的基本使用。
3.1.1 查询全部记录
创建新工程mongodb-demo,引入依赖
<?xml version="1.0" encoding="UTF-8"?>
<project xmlns="http://maven.apache.org/POM/4.0.0"
xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd">
<modelVersion>4.0.0</modelVersion>
<groupId>com.mongodb.demo</groupId>
<artifactId>mongodb-demo</artifactId>
<version>1.0-SNAPSHOT</version>
<dependencies>
<dependency>
<groupId>org.mongodb</groupId>
<artifactId>mongodb-driver</artifactId>
<version>3.8.2</version>
</dependency>
</dependencies>
</project>
创建测试类
import com.mongodb.MongoClient;
import com.mongodb.client.FindIterable;
import com.mongodb.client.MongoCollection;
import com.mongodb.client.MongoDatabase;
import org.bson.Document;
/**
* @Author: 98050
* @Time: 2018-11-26 10:30
* @Feature: mongodb测试
*/
public class Test {
public static void main(String[] args) {
//1.创建连接
MongoClient client = new MongoClient("localhost",27017);
//2.打开数据库
MongoDatabase database = client.getDatabase("spitdb");
//3.获取集合
MongoCollection<Document> spit = database.getCollection("spit");
//4.查询记录获取文档集合
FindIterable<Document> documents = spit.find();
//5.输出
for (Document document : documents){
System.out.println("内容:"+document.getString("content"));
System.out.println("用户ID:"+document.getString("userid"));
System.out.println("浏览量:"+document.getInteger("visits"));
System.out.println("---------------------------------------------");
}
//6.关闭连接
client.close();
}
}
测试结果:
3.1.2 条件查询
BasicDBObject对象:表示一个具体的记录,BasicDBObject实现了DBObject,是keyvalue的数据结构,用起来和HashMap是基本一致的。
查询userid为1013的记录
import com.mongodb.BasicDBObject;
import com.mongodb.MongoClient;
import com.mongodb.client.FindIterable;
import com.mongodb.client.MongoCollection;
import com.mongodb.client.MongoDatabase;
import org.bson.Document;
/**
* @Author: 98050
* @Time: 2018-11-26 10:48
* @Feature:
*/
public class Test2 {
public static void main(String[] args) {
//1.创建连接
MongoClient client = new MongoClient("localhost",27017);
//2.打开数据库
MongoDatabase database = client.getDatabase("spitdb");
//3.获取集合
MongoCollection<Document> spit = database.getCollection("spit");
//4.构建查询条件
BasicDBObject basicDBObject = new BasicDBObject("userid","1013");
//5.查询记录获取文档集合
FindIterable<Document> documents = spit.find(basicDBObject);
//6.输出
for (Document document : documents){
System.out.println("内容:"+document.getString("content"));
System.out.println("用户ID:"+document.getString("userid"));
System.out.println("浏览量:"+document.getInteger("visits"));
System.out.println("---------------------------------------------");
}
//7.关闭连接
client.close();
}
}
结果:
查询浏览量大于1000的记录
import com.mongodb.BasicDBObject;
import com.mongodb.MongoClient;
import com.mongodb.client.FindIterable;
import com.mongodb.client.MongoCollection;
import com.mongodb.client.MongoDatabase;
import org.bson.Document;
/**
* @Author: 98050
* @Time: 2018-11-26 10:50
* @Feature:
*/
public class Test3 {
public static void main(String[] args) {
//1.创建连接
MongoClient client = new MongoClient("localhost",27017);
//2.打开数据库
MongoDatabase database = client.getDatabase("spitdb");
//3.获取集合
MongoCollection<Document> spit = database.getCollection("spit");
//4.构建查询条件
BasicDBObject basicDBObject = new BasicDBObject("visits",new BasicDBObject("$gt",1000));
//5.查询记录获取文档集合
FindIterable<Document> documents = spit.find(basicDBObject);
//6.输出
for (Document document : documents){
System.out.println("内容:"+document.getString("content"));
System.out.println("用户ID:"+document.getString("userid"));
System.out.println("浏览量:"+document.getInteger("visits"));
System.out.println("---------------------------------------------");
}
//7.关闭连接
client.close();
}
}
结果:
3.1.3 插入数据
import com.mongodb.BasicDBObject;
import com.mongodb.MongoClient;
import com.mongodb.client.FindIterable;
import com.mongodb.client.MongoCollection;
import com.mongodb.client.MongoDatabase;
import org.bson.Document;
import java.util.Date;
import java.util.HashMap;
import java.util.Map;
/**
* @Author: 98050
* @Time: 2018-11-26 10:52
* @Feature:
*/
public class Test4 {
public static void main(String[] args) {
//1.创建连接
MongoClient client = new MongoClient("localhost",27017);
//2.打开数据库
MongoDatabase database = client.getDatabase("spitdb");
//3.获取集合
MongoCollection<Document> spit = database.getCollection("spit");
//4.构建数据
Map<String,Object> map = new HashMap<String, Object>();
map.put("content","测试");
map.put("userid","999");
map.put("visits","9999");
map.put("publishtime",new Date());
Document document = new Document(map);
//5.插入数据
spit.insertOne(document);
//6.关闭连接
client.close();
}
}
结果:
3.2 SpringDataMongoDB
SpringData家族成员之一,用于操作MongoDb的持久层框架,封装了底层的mongodb-driver。官网主页: https://spring.io/projects/spring-data-mongodb,乐优商城的评论微服务就采用SpringDataMongoDB框架