mongodb
肖老板
ECNU_SEI
展开
-
Mongodb 删除重复数据的几个方法
Mongodb 删除重复的数据最近在处理一些专利数据,从专利局爬数据的时候,总会间隙性出现中断,为了保证数据的完整性就进行了一些重复下载。将数据从几万个Excel表格中导入Mongodb后,第一步就是要去掉重复的数据。我的第一反应是写个Python小脚本,结果在执行的时候,由于数据量确实比较大,有十几万条,执行了半个小时仍不见结束。这时候才想着使用数据库的查询命令是不是可以实现去重复的功能。简单搜索原创 2017-07-10 17:52:41 · 17261 阅读 · 2 评论 -
Spring-Data-Mongodb数据库连接代码示例
Spring-Data-Mongodb数据库连接代码示例作为一名合格的程序员,除了要考虑需求的功能性实现之外,一定还要注意程序的健壮性,同时对于有运维经验的程序员来说,还要关注程序的安全性。年前闹得沸沸扬扬的Mongodb赎金事件想必给很多程序员敲了个警钟!其实当时我也中招了,手头个人的和公司的项目都使用的Mongodb,还好没有造成什么损失。对于服务器安全来说,稍微注意一点其实就可用避免百分之八九原创 2017-03-13 15:03:05 · 2728 阅读 · 0 评论 -
Spring Data MongoDB 使用group和unwind实现对数组数据进行简单统计
Spring Data MongoDB 使用group和unwind实现对数组数据进行简单统计先简单交代一下需求:新高考政策下,高中学生可以组合选择自己喜欢的三门副科,选科结束后教务需要看到这次选科的单科统计信息。数据库中保存的数据结构如下:{ "_id" : ObjectId("599bc8be5ae9fb99b2ca2499"), "_class" : "com.xxx.db.m原创 2017-08-23 20:53:37 · 14592 阅读 · 0 评论