【159期】面试官问:说说 MongoDB 批量操作与 MySQL 效率对比?

先自我介绍一下,小编浙江大学毕业,去过华为、字节跳动等大厂,目前阿里P7

深知大多数程序员,想要提升技能,往往是自己摸索成长,但自己不成体系的自学效果低效又漫长,而且极易碰到天花板技术停滞不前!

因此收集整理了一份《2024年最新Java开发全套学习资料》,初衷也很简单,就是希望能够帮助到想自学提升又不知道该从何学起的朋友。
img
img
img
img
img
img

既有适合小白学习的零基础资料,也有适合3年以上经验的小伙伴深入学习提升的进阶课程,涵盖了95%以上Java开发知识点,真正体系化!

由于文件比较多,这里只是将部分目录截图出来,全套包含大厂面经、学习笔记、源码讲义、实战项目、大纲路线、讲解视频,并且后续会持续更新

如果你需要这些资料,可以添加V获取:vip1024b (备注Java)
img

正文

public void insertOneByOne(List documents) throws ParseException{

for (Document document : documents){

collection.insertOne(document);

}

}

测试:10万条数据

System.out.println(“开始插入数据。。。”);

long startInsert = System.currentTimeMillis();

instance.insertOneByOne(documents);

System.out.println(“插入数据完成,共耗时:”+(System.currentTimeMillis() - startInsert)+“毫秒”);

结果:12068毫秒,差距非常大。由此可见,MongoDB批量插入比逐条数据插入效率提高了非常多。

2d2aec787403a510eb386a6319e0d8c4.png

补充:

MongoCollection的insertMany()方法和bulkWrite()方法是等价的,测试时间差不多,不再贴图。

public void insertMany(List documents) throws ParseException{

//和bulkWrite()方法等价

collection.insertMany(documents);

}

2、删除操作

(1)、批量删除

掌握了批量插入,批量删除就是依葫芦画瓢了。构造DeleteOneModel需要一个Bson类型参数,代表一个删除操作,这里使用了Bson类的子类Document。重点来了,这里的删除条件使用文档的_id字段,该字段在文档插入数据库后自动生成,没插入数据库前document.get("_id")为null,如果使用其他条件比如productId,那么要在文档插入到collection后在productId字段上添加索引

collection.createIndex(new Document(“productId”, 1));

因为随着collection数据量的增大,查找将越耗时,添加索引是为了提高查找效率,进而加快删除效率。另外,值得一提的是DeleteOneModel表示至多删除一条匹配条件的记录,DeleteManyModel表示删除匹配条件的所有记录。为了防止一次删除多条记录,这里使用DeleteOneModel,保证一个操作只删除一条记录。当然这里不可能匹配多条记录,因为_id是唯一的。

public void bulkWriteDelete(List documents){

List<WriteModel> requests = new ArrayList<WriteModel>();

for (Document document : documents) {

//删除条件

Document queryDocument = new Document(“_id”,document.get(“_id”));

//构造删除单个文档的操作模型,

DeleteOneModel  dom = new DeleteOneModel(queryDocument);

requests.add(dom);

}

BulkWriteResult bulkWriteResult = collection.bulkWrite(requests);

System.out.println(bulkWriteResult.toString());

}

测试:10万条数据

System.out.println(“开始删除数据。。。”);

long startDelete = System.currentTimeMillis();

instance.bulkWriteDelete(documents);

System.out.println(“删除数据完成,共耗时:”+(System.currentTimeMillis() - startDelete)+“毫秒”);

结果:2251毫秒

b0ea7e51b7ccf9b9cd6884e45fc10dff.png

(2)、逐条删除

来看看在非批量下的删除

public void deleteOneByOne(List documents){

for (Document document : documents) {

Document queryDocument = new Document(“_id”,document.get(“_id”));

DeleteResult deleteResult = collection.deleteOne(queryDocument);

}

}

测试:10万条数据

System.out.println(“开始删除数据。。。”);

long startDelete = System.currentTimeMillis();

instance.deleteOneByOne(documents);

System.out.println(“删除数据完成,共耗时:”+(System.currentTimeMillis() - startDelete)+“毫秒”);

结果:12765毫秒,比批量删除效率低很多

7525719d16251eeda39d43181fb46ac3.png

3、更新操作

(1)、批量更新

再来看看批量更新,分UpdateOneModel和UpdateManyModel两种,区别是前者更新匹配条件的一条记录,后者更新匹配条件的所有记录。对于ReplaceOneModel,表示替换操作,这里也归为更新,现在以UpdateOneModel为例进行讲解。UpdateOneModel构造方法接收3个参数,第一个是查询条件,第二个参数是要更新的内容,第三个参数是可选的UpdateOptions,不填也会自动帮你new一个,代表批量更新操作未匹配到查询条件时的动作,它的upser属性值默认false,什么都不干,true时表示将一个新的Document插入数据库,这个新的Document是查询Document和更新Document的结合,但如果是替换操作,这个新的Document就是这个替换Document。

这里会有个疑惑:这和匹配到查询条件后执行替换操作结果不一样吗?区别在于_id字段,未匹配查询条件时插入的新的Document的_id是新的,而成功执行替换操作,_id是原先旧的。

public void bulkWriteUpdate(List documents){

List<WriteModel> requests = new ArrayList<WriteModel>();

for (Document document : documents) {

//更新条件

Document queryDocument = new Document(“_id”,document.get(“_id”));

//更新内容,改下书的价格

Document updateDocument = new Document(“$set”,new Document(“price”,“30.6”));

//构造更新单个文档的操作模型

UpdateOneModel uom = new UpdateOneModel(queryDocument,updateDocument,new UpdateOptions().upsert(false));

//UpdateOptions代表批量更新操作未匹配到查询条件时的动作,默认false,什么都不干,true时表示将一个新的Document插入数据库,他是查询部分和更新部分的结合

requests.add(uom);

}

BulkWriteResult bulkWriteResult = collection.bulkWrite(requests);

System.out.println(bulkWriteResult.toString());

}

测试:10万条数据

System.out.println(“开始更新数据。。。”);

long startUpdate = System.currentTimeMillis();

instance.bulkWriteUpdate(documents);

System.out.println(“更新数据完成,共耗时:”+(System.currentTimeMillis() - startUpdate)+“毫秒”);

结果:3198毫秒

1fc7a04d1a2550de715a54fdc5716683.png

(2)、逐条更新

对比非批量下的更新

public void updateOneByOne(List documents){

for (Document document : documents) {

Document queryDocument = new Document(“_id”,document.get(“_id”));

Document updateDocument = new Document(“$set”,new Document(“price”,“30.6”));

UpdateResult UpdateResult = collection.updateOne(queryDocument, updateDocument);

}

}

测试:10万条数据

System.out.println(“开始更新数据。。。”);

long startUpdate = System.currentTimeMillis();

instance.updateOneByOne(documents);

System.out.println(“更新数据完成,共耗时:”+(System.currentTimeMillis() - startUpdate)+“毫秒”);

结果:13979毫秒,比批量更新效率低很多

4636cac6748b76f6cda134aa97357b02.png

4、混合批量操作

bulkWrite()方法可以对不同类型的写操作进行批量处理,代码如下:

public void bulkWriteMix(){

List<WriteModel> requests = new ArrayList<WriteModel>();

InsertOneModel  iom = new InsertOneModel(new Document(“name”,“kobe”));

1200页Java架构面试专题及答案

小编整理不易,对这份1200页Java架构面试专题及答案感兴趣劳烦帮忙转发/点赞

百度、字节、美团等大厂常见面试题

网上学习资料一大堆,但如果学到的知识不成体系,遇到问题时只是浅尝辄止,不再深入研究,那么很难做到真正的技术提升。

需要这份系统化的资料的朋友,可以添加V获取:vip1024b (备注Java)
img

一个人可以走的很快,但一群人才能走的更远!不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人,都欢迎加入我们的的圈子(技术交流、学习资源、职场吐槽、大厂内推、面试辅导),让我们一起学习成长!
-1713077894582)]

[外链图片转存中…(img-o71l3jT0-1713077894583)]

百度、字节、美团等大厂常见面试题

[外链图片转存中…(img-Xrpopbly-1713077894583)]

网上学习资料一大堆,但如果学到的知识不成体系,遇到问题时只是浅尝辄止,不再深入研究,那么很难做到真正的技术提升。

需要这份系统化的资料的朋友,可以添加V获取:vip1024b (备注Java)
[外链图片转存中…(img-Qfdhjtnz-1713077894584)]

一个人可以走的很快,但一群人才能走的更远!不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人,都欢迎加入我们的的圈子(技术交流、学习资源、职场吐槽、大厂内推、面试辅导),让我们一起学习成长!

  • 30
    点赞
  • 22
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值