- 博客(4)
- 收藏
- 关注
原创 Scrapy爬虫遇到的问题
今天做python爬虫时,之前可以爬取的网站网址显示:爬取内容为空。依次查找问题:(1)INFO: Crawled 0 pages (at 0 pages/min), scraped 0 items (at 0 items/min)报错提示Scrapy爬虫没有任何数据返回,需要修改settings.py设置文件中的ROBOTST_OBEY,将其默认值True改为False。(2)[scrapy.downloadermiddlewares.redirect] DEBUG: Red.
2022-05-12 14:40:00
2662
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人