以前我们的管理系统用poi可以通过一个excel文件批量导入手机号码,在这个过程中需要验证号码格式、是否重复、系统是否存在等,因为效率问题,所以最后限定只导入excel文件的第一列,也就是65535行数据。
有一点要说一下,系统的数据量非常大,关联表的数据都是亿级。
现在有这么一个需求,要支持多个excel文件同时导入,不知道各位是否有好的建议?要从效率和空间上考虑,还好我们的服务器是4G内存。
我能想到的仅是多线程来处理,不至于处理过程要等半天。
any others?
有一点要说一下,系统的数据量非常大,关联表的数据都是亿级。
现在有这么一个需求,要支持多个excel文件同时导入,不知道各位是否有好的建议?要从效率和空间上考虑,还好我们的服务器是4G内存。
我能想到的仅是多线程来处理,不至于处理过程要等半天。
any others?