- 博客(1)
- 收藏
- 关注
原创 十个Python爬虫武器库示例,十个爬虫框架,十种实现爬虫的方法!
一般比价小型的爬虫需求,我是直接使用requests库 + bs4就解决了,再麻烦点就使用selenium解决js的异步 加载问题。相对比较大型的需求才使用框架,主要是便于管理以及扩展等。1.ScrapyScrapy是一个为了爬取网站数据,提取结构性数据而编写的应用框架。 可以应用在包括数据挖掘,信息处理或存储历史数据等一系列的程序中。特性:在这里还是要...
2019-09-01 17:15:16 20249
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人