Scrapy 结构图解析
Scrapy1.4.0科普文章
下面是Scrapy 结构图 上图的数字代表数据的流向,解释如下
1 引擎从Spider 获取初始Request对象
2 引擎将获取的Request对象交给调度器Scheduler,并向Spider要下一个Request对象
3 调度器将下一个Request对象交给引擎
4 引擎将Request对象交给下载器Downloader, 途径下载器中间件
5 网页下载完成,下
原创
2017-08-21 20:43:12 ·
1501 阅读 ·
0 评论