业务需要:将1000万条数据通过ajax计算后,返回到后端再存入数据库中。
最开始的想法是:将数据全部通过List传到浏览器,然后浏览器再将数据进行遍历计算。
问题:首先是后端jvm内存不够,然后是内存急剧减少后,运算速度变慢。前端浏览器兼顾数据储存和计算功能,浏览器受不了,崩溃。
根据以上问题,想法:后台传递部分数据然后返回给前端处理,然后再传部分数据,再处理。这样分段处理,可以减少电脑负荷。
基本逻辑:
然后将需要计算数据一直循环完。
虽然说运行的时候浏览器会卡死,但是这只是数据计算问题(只需要用来计算)
具体实现代码不太好帖,具体可以交流
若出现xml解析错误可以参考:https://blog.csdn.net/qq_31293575/article/details/81182180