scrapy库安装失败的解决办法

scrapy库安装失败的解决办法

安装scrapy的时候，使用pip install scrapy一般会失败。报超时的错误：

所以我们需要换另一种形式来安装，我们先将scrapy安装过程中所用到的依赖的库安装完成之后，在安装scrapy，这样子便可以安装成功了。
需要安装的依赖库有 lxml、 pyOpenSSL 、 Twisted 、pywin32。需要注意的是我们安装的这些库，都是通过wheel来安装的。因此在安装这些库之前，先得安装wheel。打开控制台窗口，输入pip install wheel，先安装wheel库。
安装这些库的时候，得注意下载的.whl文件的版本号，需要和自身的python的版本号对应。例如：

我的python的版本3.5 64位，则选择下载的.whl的版本为XXX-cp35-cp35-win-amd64.whl

（1）安装lxml，到https://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted ，查询lxml对应环境python的.whl文件。本文使用的是lxml-4.1.0-cp35-cp35m-win_amd64.whl，下载完成之后。在文件的目录起一个控制台窗口，如下图，便可以启动一个控制台。输入pip install lxml-4.1.0-cp35-cp35m-win_amd64.whl ，即可安装成功。如果提示版本不对，那么就是python和whl文件的版本不对应。

（2）安装pyOpenSSL ，直接在控制台输入pip install pyOpenSSL，然后等待安装完成。
（3）安装Twisted，在https://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted，网站上面找到适合的安装whl文件，安装的步骤同安装lxml一样。
（4）安装pywin32，在https://sourceforge.net/projects/pywin32/files/pywin32/，找到对应的安装文件，该文件为.exe结尾的文件。直接到下载的保存目录，执行exe文件，然后按照提示安装。

将上述的库安装完成之后，便可以开始安装scrapy。打开控制台，执行pip install scrapy。我刚开始也是安装scrapy报错，后来将所有的库安装上去之后，最终安装成功了。注意过程中可能还会出现超时的问题，遇到这种情况，重试一两次即可。