从网上找了很多资料,都没有理想的效果,优化等等没有多大的提升,我的解决思路很简单,解决了我很大的问题。
实现思路,在查询的时候避免全库查询,添加时间范围没多大用处,最后实验了一下加ID范围,效果明显提升,一千三百多万数据查询原来需要23秒,现在一两秒内即可响应。
实现方法,找到思路,就好找实现了,方法多种,本人能力有限,用了个笨方法,就是建个另外建了个库,主要两个字段,一个是被查表的ID,一个是时间。然后做个定时任务,每十分钟获取一条被查询的ID存入对比库,并记录当前时间。第二步就是逻辑了,通过对比库,查询时间范围,去拉取的数据最后一条的被查Id和最新的一条被查库的ID,放入被查库的执行语句。还有里面有些逻辑问题,请自行根据实际情况设计吧,我这里主要想分享一下思路,具体实现就不写了。希望能帮助用到的朋友
Django操作千万MySQL数据
最新推荐文章于 2024-05-27 09:06:05 发布