MongoDB
风度翩翩猪肉王子
这个作者很懒,什么都没留下…
展开
-
MongoDB + Robo 3T数据去重
Robo 3T是MongoDB数据库的可视化界面软件。 爬虫时会因为某些原因,导致抓取的数据会有重复的。 除了在代码中处理去重,我们可以动动手指即可实现去重处理。 因此,我们可以指定字段来去重。 只需在Robo 3T可视化界面中输入一下代码即可: db.getCollection('数据表名称').aggregate([{$group:{_id:{字段名:'$字段名'}, count:{...原创 2018-08-05 18:03:45 · 1016 阅读 · 0 评论 -
Python数据存入MongoDB
import pymongo # 配置数据库信息 MONGO_URl = 'localhost' MONGO_DB = 'taobao' # 数据库名 MONGO_TABLE = 'iphonex_url' # 表名 # 连接数据库 client = pymongo.MongoClient(MONGO_URl) db = client[MONGO_DB] # 存入数据库 def save_u...原创 2018-08-15 09:02:08 · 4552 阅读 · 0 评论