Scrapy 架构流程图(官方文档) - 翻译整理
架构概述
本文档描述了Scrapy的体系结构及其组件的交互方式。
概述
下图显示了Scrapy体系结构及其组件的概述以及系统内部发生的数据流的概述(由红色箭头显示)。下面包含组件的简要说明,并提供链接以获取有关它们的更多详细信息。数据流也在下面描述。
数据流
Scrapy中的数据流由执行引擎控制,如下所示:
该引擎获得初始请求从抓取蜘蛛。
该引擎安排在请求调度程序和要求下一个...
原创
2019-08-07 17:50:29 ·
1031 阅读 ·
0 评论