问题:之前在另一台电脑已经搭好的项目,在跑上传并储存数据到数据库的时候,总耗时只要10s。后来将项目重新部署到一个新电脑上面,重新搭好环境,跑同一段代码的时候,总耗时变成;了30s。
经过研究,发现代码中主要的耗时在mongoDB的update中,而且update命令也是要有查询操作的,在原来的项目中,mongoDB里的索引已经建立好。在换到新电脑的时候,没有想到这一层面,导致运行速度降低了66%。
总结:索引能大大提升搜索速度,大概3倍-4倍!!
代码一览:
通过pymongo更新数据
db.order_refund_data.update({'transaction-type': dict_data['transaction-type'],
'posted-date': dict_data['posted-date'],
'order-id': dict_data['order-id'],
'sku': dict_data['sku']},
{"$set": dict_data}, True)
通过pymongo建立索引
def mongoDB_createCollection():
'''
创建全文索引,和单键索引
'''
from pymongo import ASCENDING, TEXT
db = Connect_MongoDB()
# 单键索引
db.sku.ensure_index([('sku', ASCENDING )])
db.order_refund_data.ensure_index([('sku', ASCENDING )])
db.order_refund_data.ensure_index([('transaction-type', ASCENDING )])
db.order_refund_data.ensure_index([('posted-date', ASCENDING )])
db.order_refund_data.ensure_index([('account', ASCENDING )])
# 全文索引
# db.order_refund_data.create_index([('sku', TEXT )])