1.IO操作太慢了,太多的文件需要进行读写效率过于低下了。
2. 真实遇到了问题,发现多进程带来的优势。
3. 同时执行需要考虑到数据共享的问题。
4. 需要指定进程池pool的大小进行运行
具体案例后期进行完善
案例一:
用pandas真正使用上多核处理,利用起来。
两者对比速度提升了,具体使用请看。
11-09
1680
![](https://csdnimg.cn/release/blogv2/dist/pc/img/readCountBlack.png)
05-31
2394
![](https://csdnimg.cn/release/blogv2/dist/pc/img/readCountBlack.png)
06-28
198
![](https://csdnimg.cn/release/blogv2/dist/pc/img/readCountBlack.png)