python
文章平均质量分 77
fenyujinian
这个作者很懒,什么都没留下…
展开
-
python下多线程爬虫爬取斗图网的所有最新图片
网易云课堂上的教程,写在这里方便以后查看。先来一个简单的多线程例子:#encoding:utf-8import threadingimport randomimport time#生产者和消费者MONEY = 0gLock = threading.Lock()def procuder(): while True: global MONEY原创 2017-11-08 09:21:05 · 682 阅读 · 0 评论 -
python爬虫爬取糗百成人图片单线程版本
爬取糗百成人图片的所有图图,先来个单线程版本的:#encoding:utf-8#单线程简单版本import requestsimport osfrom bs4 import BeautifulSoupimport threadingimport urllib.requestFIRST_PAGE_URL = 'http://www.qiubaichengren.com/{}.h原创 2017-11-09 15:20:15 · 2732 阅读 · 0 评论 -
python爬虫爬取糗百成人图片多线程版本
来个简单的多线程,爬取速度比单线程要快很多,下面上代码:#encoding:utf-8#多线程爬取import requestsimport osfrom bs4 import BeautifulSoupimport threadingimport urllib.requestFIRST_PAGE_URL = 'http://www.qiubaichengren.com/{}原创 2017-11-09 15:43:19 · 2094 阅读 · 0 评论