本文探讨了如何使用Gevent框架在Python中实现多进程模式以利用多核资源，解决GIL限制。通过gevent.fork代替os.fork，结合multiprocessing模块，实现了并行处理，提高性能。在测试环境中，随着进程数增加，每秒处理的请求数呈现几乎成倍增长。
Gevent框架性能很高，但一直以来我都纠结在python的GIL模型导致的线程不能抢占多核资源上面。
而启动多个python进程的这种利用多核的模式又需要增加前端负载均衡，比如lvs那些，有些麻烦。
multiprocessing模块和os.fork又会使得两个进程重复在事件核心注册accept事件，导致文件句柄重复的异常。
至于一个进程监听，多个进程处理的模式，监听的那个进程资源又不好分配——是独立分配一个核心还是不单独分配呢？如果单独分配，连接量小的时候就浪费了一个核心，如果不分配，连接量大的时候cpu又会频繁切换进程。
昨日才发现原来gevent是可以很轻松地将它的网络模型分布到多个进程并行处理的。
秘诀就在gevent.fork()。
以前想当然地认为gevent.fork只是greenlet.spawn的一个包装，原来不是这样。gevent.fork能替代os.fork，不仅会启动一个新的进程，而且能将它们底层的事件处理沟通起来，进行并行处理。
import gevent
from gevent.server import StreamServer
def ea
最低0.47元/天 解锁文章
89
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
