【159期】面试官问:说说 MongoDB 批量操作与 MySQL 效率对比?

35336f62dcf21f11d3ad8b17d7c93ccc.png

(2)、逐条插入

下面再通过非批量插入10万个数据对比下,方法如下:

public void insertOneByOne(List documents) throws ParseException{

for (Document document : documents){

collection.insertOne(document);

}

}

测试:10万条数据

System.out.println(“开始插入数据。。。”);

long startInsert = System.currentTimeMillis();

instance.insertOneByOne(documents);

System.out.println(“插入数据完成,共耗时:”+(System.currentTimeMillis() - startInsert)+“毫秒”);

结果:12068毫秒,差距非常大。由此可见,MongoDB批量插入比逐条数据插入效率提高了非常多。

2d2aec787403a510eb386a6319e0d8c4.png

补充:

MongoCollection的insertMany()方法和bulkWrite()方法是等价的,测试时间差不多,不再贴图。

public void insertMany(List documents) throws ParseException{

//和bulkWrite()方法等价

collection.insertMany(documents);

}

2、删除操作

(1)、批量删除

掌握了批量插入,批量删除就是依葫芦画瓢了。构造DeleteOneModel需要一个Bson类型参数,代表一个删除操作,这里使用了Bson类的子类Document。重点来了,这里的删除条件使用文档的_id字段,该字段在文档插入数据库后自动生成,没插入数据库前document.get("_id")为null,如果使用其他条件比如productId,那么要在文档插入到collection后在productId字段上添加索引

collection.createIndex(new Document(“productId”, 1));

因为随着collection数据量的增大,查找将越耗时,添加索引是为了提高查找效率,进而加快删除效率。另外,值得一提的是DeleteOneModel表示至多删除一条匹配条件的记录,DeleteManyModel表示删除匹配条件的所有记录。为了防止一次删除多条记录,这里使用DeleteOneModel,保证一个操作只删除一条记录。当然这里不可能匹配多条记录,因为_id是唯一的。

public void bulkWriteDelete(List documents){

List<WriteModel> requests = new ArrayList<WriteModel>();

for (Document document : documents) {

//删除条件

Document queryDocument = new Document(“_id”,document.get(“_id”));

//构造删除单个文档的操作模型,

DeleteOneModel  dom = new DeleteOneModel(queryDocument);

requests.add(dom);

}

BulkWriteResult bulkWriteResult = collection.bulkWrite(requests);

System.out.println(bulkWriteResult.toString());

}

测试:10万条数据

System.out.println(“开始删除数据。。。”);

long startDelete = System.currentTimeMillis();

instance.bulkWriteDelete(documents);

System.out.println(“删除数据完成,共耗时:”+(System.currentTimeMillis() - startDelete)+“毫秒”);

结果:2251毫秒

b0ea7e51b7ccf9b9cd6884e45fc10dff.png

(2)、逐条删除

来看看在非批量下的删除

public void deleteOneByOne(List documents){

for (Document document : documents) {

Document queryDocument = new Document(“_id”,document.get(“_id”));

DeleteResult deleteResult = collection.deleteOne(queryDocument);

}

}

测试:10万条数据

System.out.println(“开始删除数据。。。”);

long startDelete = System.currentTimeMillis();

instance.deleteOneByOne(documents);

System.out.println(“删除数据完成,共耗时:”+(System.currentTimeMillis() - startDelete)+“毫秒”);

结果:12765毫秒,比批量删除效率低很多

7525719d16251eeda39d43181fb46ac3.png

3、更新操作

(1)、批量更新

再来看看批量更新,分UpdateOneModel和UpdateManyModel两种,区别是前者更新匹配条件的一条记录,后者更新匹配条件的所有记录。对于ReplaceOneModel,表示替换操作,这里也归为更新,现在以UpdateOneModel为例进行讲解。UpdateOneModel构造方法接收3个参数,第一个是查询条件,第二个参数是要更新的内容,第三个参数是可选的UpdateOptions,不填也会自动帮你new一个,代表批量更新操作未匹配到查询条件时的动作,它的upser属性值默认false,什么都不干,true时表示将一个新的Document插入数据库,这个新的Document是查询Document和更新Document的结合,但如果是替换操作,这个新的Document就是这个替换Document。

这里会有个疑惑:这和匹配到查询条件后执行替换操作结果不一样吗?区别在于_id字段,未匹配查询条件时插入的新的Document的_id是新的,而成功执行替换操作,_id是原先旧的。

public void bulkWriteUpdate(List documents){

List<WriteModel> requests = new ArrayList<WriteModel>();

for (Document document : documents) {

//更新条件

Document queryDocument = new Document(“_id”,document.get(“_id”));

//更新内容,改下书的价格

Document updateDocument = new Document(“$set”,new Document(“price”,“30.6”));

//构造更新单个文档的操作模型

UpdateOneModel uom = new UpdateOneModel(queryDocument,updateDocument,new UpdateOptions().upsert(false));

//UpdateOptions代表批量更新操作未匹配到查询条件时的动作,默认false,什么都不干,true时表示将一个新的Document插入数据库,他是查询部分和更新部分的结合

requests.add(uom);

}

BulkWriteResult bulkWriteResult = collection.bulkWrite(requests);

System.out.println(bulkWriteResult.toString());

}

测试:10万条数据

System.out.println(“开始更新数据。。。”);

long startUpdate = System.currentTimeMillis();

instance.bulkWriteUpdate(documents);

System.out.println(“更新数据完成,共耗时:”+(System.currentTimeMillis() - startUpdate)+“毫秒”);

结果:3198毫秒

1fc7a04d1a2550de715a54fdc5716683.png

(2)、逐条更新

对比非批量下的更新

public void updateOneByOne(List documents){

for (Document document : documents) {

Document queryDocument = new Document(“_id”,document.get(“_id”));

Document updateDocument = new Document(“$set”,new Document(“price”,“30.6”));

UpdateResult UpdateResult = collection.updateOne(queryDocument, updateDocument);

}

}

测试:10万条数据

System.out.println(“开始更新数据。。。”);

long startUpdate = System.currentTimeMillis();

instance.updateOneByOne(documents);

System.out.println(“更新数据完成,共耗时:”+(System.currentTimeMillis() - startUpdate)+“毫秒”);

结果:13979毫秒,比批量更新效率低很多

4636cac6748b76f6cda134aa97357b02.png

4、混合批量操作

bulkWrite()方法可以对不同类型的写操作进行批量处理,代码如下:

public void bulkWriteMix(){

List<WriteModel> requests = new ArrayList<WriteModel>();

InsertOneModel  iom = new InsertOneModel(new Document(“name”,“kobe”));

UpdateManyModel umm = new UpdateManyModel(new Document(“name”,“kobe”),

new Document(“$set”,new Document(“name”,“James”)),new UpdateOptions().upsert(true));

DeleteManyModel  dmm = new DeleteManyModel(new Document(“name”,“James”));

requests.add(iom);

requests.add(umm);

requests.add(dmm);

BulkWriteResult bulkWriteResult = collection.bulkWrite(requests);

System.out.println(bulkWriteResult.toString());

}

72d611386cbcb0b8bb7d90128d9da3df.png

注意:updateMany()、deleteMany()两个方法和insertMany()不同,它俩不是批量操作,而是代表更新(删除)匹配条件的所有数据。

版权声明:本文为CSDN博主「风树种子」的原创文章,遵循CC 4.0 BY-SA版权协议,转载请附上原文出处链接及本声明。

https://blog.csdn.net/u014513883/article/details/49365987

自我介绍一下,小编13年上海交大毕业,曾经在小公司待过,也去过华为、OPPO等大厂,18年进入阿里一直到现在。

深知大多数Java工程师,想要提升技能,往往是自己摸索成长或者是报班学习,但对于培训机构动则几千的学费,着实压力不小。自己不成体系的自学效果低效又漫长,而且极易碰到天花板技术停滞不前!

因此收集整理了一份《2024年Java开发全套学习资料》,初衷也很简单,就是希望能够帮助到想自学提升又不知道该从何学起的朋友,同时减轻大家的负担。img

既有适合小白学习的零基础资料,也有适合3年以上经验的小伙伴深入学习提升的进阶课程,基本涵盖了95%以上Java开发知识点,真正体系化!

由于文件比较大,这里只是将部分目录截图出来,每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频,并且会持续更新!

如果你觉得这些内容对你有帮助,可以扫码获取!!(备注Java获取)

img

总结

机会是留给有准备的人,大家在求职之前应该要明确自己的态度,熟悉求职流程,做好充分的准备,把一些可预见的事情做好。

对于应届毕业生来说,校招更适合你们,因为绝大部分都不会有工作经验,企业也不会有工作经验的需求。同时,你也不需要伪造高大上的实战经验,以此让自己的简历能够脱颖而出,反倒会让面试官有所怀疑。

你在大学时期应该明确自己的发展方向,如果你在大一就确定你以后想成为Java工程师,那就不要花太多的时间去学习其他的技术语言,高数之类的,不如好好想着如何夯实Java基础。下图涵盖了应届生乃至转行过来的小白要学习的Java内容:

请转发本文支持一下

《互联网大厂面试真题解析、进阶开发核心学习笔记、全套讲解视频、实战项目源码讲义》点击传送门即可获取!
适合你们,因为绝大部分都不会有工作经验,企业也不会有工作经验的需求。同时,你也不需要伪造高大上的实战经验,以此让自己的简历能够脱颖而出,反倒会让面试官有所怀疑。

你在大学时期应该明确自己的发展方向,如果你在大一就确定你以后想成为Java工程师,那就不要花太多的时间去学习其他的技术语言,高数之类的,不如好好想着如何夯实Java基础。下图涵盖了应届生乃至转行过来的小白要学习的Java内容:

请转发本文支持一下

[外链图片转存中…(img-kRQnHWaO-1713390284750)]

[外链图片转存中…(img-JpBDvXu6-1713390284750)]

《互联网大厂面试真题解析、进阶开发核心学习笔记、全套讲解视频、实战项目源码讲义》点击传送门即可获取!

  • 11
    点赞
  • 18
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值