如何解决scrapy爬虫框架失败的问题

下面是我安装scrapy成功的经历,分享给大家:
安装scrapy一般使用:pip install scrapy 是安装不成功的,在安装的过程中会报错,本人的安装过程中报错的信息如下:

1.第一个错误提示:
错误的原因:没有安装Twisted
在这里插入图片描述

Failed building wheel for Twisted
Running setup.py clean for Twisted
Failed to build Twisted

2.第二个错误提示: 错误的原因:也是没有安装Twisted*

在这里插入图片描述
error: Microsoft Visual C++ 14.0 is required. Get it with “Microsoft Visual C++ Build Tools”: http://landinghub.visualstudio.com/visual-cpp-build-tools

----------------------------------------

Command “d:\anzhuangruanjianqu\python.exe -u -c “import setuptools, tokenize;file=‘C:\Users\TXHY\AppData\Local\Temp\pip-install-dcfi_8_5\Twisted\setup.py’;f=getattr(tokenize, ‘open’, open)(file);code=f.read().replace(’\r\n’, ‘\n’);f.close();exec(compile(code, file, ‘exec’))” install --record C:\Users\TXHY\AppData\Local\Temp\pip-record-xxs_os9t\install-record.txt --single-version-externally-managed --compile” failed with error code 1 in C:\Users\TXHY\AppData\Local\Temp\pip-install-dcfi_8_5*Twisted*

**

解释一下:

**由第一和第二个错误信息可知,我们安装 scrapy 没有成功的原因是没有安装 Twisted 文件。

所以我们现在要做的是先下载 Twisted 文件,下载地址是:https://www.lfd.uci.edu/~gohlke/pythonlibs/#lxml
进入链接之后怎样找到 Twisted 文件,步骤如下:
(1)按快捷键【Ctrl】+F 弹出搜索框,然后输入Twisted 查找对应的下载链接
在这里插入图片描述
(2)在红线旁边的27,34,35,36,37代表的是Python的版本号来的,例如:我的版本是Python 3.7系列的,而且是64位的window系统,那么我对应着就是点击最后的一个链接 Twisted‑18.7.0‑cp37‑cp37m‑win_amd64.whl 进行下载。
在这里插入图片描述
(3)进行安装Twisted 文件:要在下载文件的目录安装文件,例如:我的文件下载在 D:\xuexiruanjian 的目录下,那么安装过程如下:
在这里插入图片描述
第一步:【win】+R 进入运行系统
第二步:输入 d: (由于我的文件在d盘,所以要先进入d盘)
第三步:输入 cd xuexiruanjian\ (进入我的文件下载目录下)
第四步:输入 pip install Twisted-18.7.0-cp37-cp37m-win_amd64.whl (安装成功,这时还没安装 scrapy)
在这里插入图片描述
第五步:输入几次 cd . . (回到c盘目录下)
第六步:输入 pip install scrapy (到此就安装 scrapy 成功了)
在这里插入图片描述
在这里插入图片描述

最后说明一下:

如果你安装scrapy时,错误不只是Twisted 文件,你也可以按照上面的流程来安装。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

txhy2018

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值