requests 是一个http框架,可以用来做爬虫
scrapy 是一个专业的爬虫框架
| 优点 | 缺点 | |
|---|---|---|
| requests | 入门快,自己实现,易于拓展修改 | 实现一个稳定的业务比较麻烦 |
| scrapy | 提供各种工具,较为方便 | 前期需要进行学习配置,后期限制比较多 |
如果是长期做的话,那建议,先入手scrapy,然后再对这个框架进行自己需求上的升级。维护开源库,进行造轮子,哈哈
requests与scrapy对比
requests 是一个http框架,可以用来做爬虫
scrapy 是一个专业的爬虫框架
| 优点 | 缺点 | |
|---|---|---|
| requests | 入门快,自己实现,易于拓展修改 | 实现一个稳定的业务比较麻烦 |
| scrapy | 提供各种工具,较为方便 | 前期需要进行学习配置,后期限制比较多 |
如果是长期做的话,那建议,先入手scrapy,然后再对这个框架进行自己需求上的升级。维护开源库,进行造轮子,哈哈
1134
257

被折叠的 条评论
为什么被折叠?