gevent案例&进程-线程-协程对比

并发下载器

import gevent
from gevent import monkey
monkey.patch_all()

import requests      # urllib 进行封装 爬虫 80-90%用requests

# 并行?并发?   
# 协程--> 并发  协程一定是并发的 单线程完成多任务

def download(url):
    print('get: %s' % url)
    res = requests.get(url)
    data = res.text
    print(len(data), url)


# g1 = gevent.spawn(download, 'https://www.baidu.com/')
# g2 = gevent.spawn(download, 'https://www.python.org/')
# g3 = gevent.spawn(download, 'https://www.baidu.com/')
#
# g1.join()
# g2.join()
# g3.join()

gevent.joinall([
    gevent.spawn(download, 'https://www.baidu.com/'),
    gevent.spawn(download, 'https://www.python.org/'),
    gevent.spawn(download, 'https://www.baidu.com/')
])

简单总结
进程是资源分配的单位
线程是操作系统调度的单位
进程切换需要的资源最大，效率很低
线程切换需要的资源一般，效率一般（当然在不考虑GIL的情况下）
协程切换任务资源很小，效率高
多进程、多线程根据cpu核数不一样可能是并行的，但是协程是在一个线程中所以是并发