john_puti的博客

转载 一分钟让你的程序支持队列和并发

工作了的开发同学想必都会给运营、产品等同事跑过数据。在豆瓣，基本每个工程师都在用DPark，原理就是把任务拆分，利用DPark集群，在多台服务器上同时运行这些任务可以快速的获得结果。但是有些需求不能使用DPark，比如有频繁的数据库操作，想象一下，一跑起来就会出现大量集群的进程连接数据库，让数据库压力骤增，甚至影响现有服务； 有些需求用DPark有点杀鸡用了宰牛刀的感觉，占用了D