![](https://img-blog.csdnimg.cn/20201014180756780.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
scrapy
小高同学~
一个不正经的程序员~
展开
-
Scrapy框架简介及第一个爬虫
解析Scrapy架构组件(Scrapy Engine) 引擎负责控制数据流在系统中所有组件中流动,并在相应动作发生时触发事件。 详细内容查看下面的数据流(Data Flow)部分。 调度器(Scheduler) 调度器从引擎接受request并将它们入队,以便之后引擎请求它们时提供给引擎 下载器(Downloader) 下载器负责获取页面数据兵器同给引擎,而后提供给spi...原创 2018-04-23 23:02:16 · 534 阅读 · 0 评论 -
Window环境下Scrapy开发环境搭建
快速搭建scrapy开发环境Python3.6.5pipvc++Twisted快捷键加粗 Ctrl + B 斜体 Ctrl + I 引用 Ctrl + Q插入链接 Ctrl + L插入代码 Ctrl + K插入图片 Ctrl + G提升标题 Ctrl + H有序列表 Ctrl + O无序列表 Ctrl...原创 2018-06-24 23:57:44 · 1171 阅读 · 0 评论