requests 是一个http框架,可以用来做爬虫
scrapy 是一个专业的爬虫框架
优点 | 缺点 | |
---|---|---|
requests | 入门快,自己实现,易于拓展修改 | 实现一个稳定的业务比较麻烦 |
scrapy | 提供各种工具,较为方便 | 前期需要进行学习配置,后期限制比较多 |
如果是长期做的话,那建议,先入手scrapy,然后再对这个框架进行自己需求上的升级。维护开源库,进行造轮子,哈哈
requests 是一个http框架,可以用来做爬虫
scrapy 是一个专业的爬虫框架
优点 | 缺点 | |
---|---|---|
requests | 入门快,自己实现,易于拓展修改 | 实现一个稳定的业务比较麻烦 |
scrapy | 提供各种工具,较为方便 | 前期需要进行学习配置,后期限制比较多 |
如果是长期做的话,那建议,先入手scrapy,然后再对这个框架进行自己需求上的升级。维护开源库,进行造轮子,哈哈