- 博客(1)
- 收藏
- 关注
转载 Scrapy
1.介绍 Scrapy,Python开发的一个快速、高层次的屏幕抓取和web抓取框架,用于抓取web站点并从页面中提取结构化的数据。Scrapy用途广泛,可以用于数据挖掘、监测和自动化测试。Scrapy使用了Twisted异步网络库来处理网络通讯,整体架构大致如下: Scrapy主要包括了以下组件: 引擎(Scrapy Engine) Scrapy Engine是整个框架...
2018-05-27 19:35:00
130
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人