python
Ke_Ca
对大数据处理技术,数据挖掘,实时/分布式计算有浓厚兴趣。并不断地钻研这些技术,应用于安全检测系统的搭建与开发。希望最终构建一个基于大数据的智能化的监控与预警的安全检测平台。
展开
-
Python——multiprocessing包的学习心得(进程池)
上一篇,已经说了multiprocessing包提供了进程池的概念。可以直接利用。这里,直接贴出代码简单说明一下就好。 代码如下:from module import IpCheckfrom module import MyLoggerfrom multiprocessing import Poolimport time,osdef logger(filepath,lines原创 2013-11-05 11:15:01 · 1348 阅读 · 0 评论 -
Python——multiprocessing包的学习心得(进程间通信)
为了快速开发,使用了python。发现其性能确实令人堪忧,虽然使用了python的多线程,但python的多线程有一个全局锁,其实并未真正的充分利用系统的硬件资源(不能充分利用多核)。又不想颠覆性的开发,经同事建议,就开始学习multiprocessing包。 multiprocessing包实际上就是个进程管理的包。可以方便的管理多个进程。经过几天的学习,只改动了几行的代码,就使得原有原创 2013-11-04 20:39:52 · 3263 阅读 · 2 评论