scrapy执行常见错误及解决方案

一个简单项目,爬取豆瓣top250书单

运行方法:

  1. 在cmd中运行
  2. 创建main.py运行

在编译器中运行main文件,提示:

在cmd中输入指令:scrapy crawl douban

也出现以上错误,或者出现:没找到pywin32

解决方案:

  1. 注意main文件与scrapy.cfg文件同级
  2. 运行时(cmd或编译器)路径切换到scrapy.cfg的所在文件夹位置
  3. 先安装pywin32文件(下载地址:https://pypi.org/project/pywin32/#files),注意安装与你的python对应版本的pywin32,下载后在文件所在路径以管理员身份打开cmd,输入pip install pywin32回车即可
  4. 爬虫文件中allowed_domains尝试修改为allowed_domins

(根据个人遇到的问题记录的,如有遇到其他错误再继续加上来)

 

  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值