Scrapy爬虫框架的安装

我们直接用pip安装Scrapy的话，会发生错误，提示构建twisted时安装失败，或者提示安装 Microsoftvisual c++14.0 的一个库。

 运行pip install Scrapy时候提示Twisted安装失败所以我们就得按着提示，哪个组件失败了就手动去安装哪个（这里是Twisted）相关组件。提示安装Microsoftvisual c++14.0的一个库意思就是少了Twisted这个库，可能python版本不同提示也不同。

我们这时候要去找到这个Twisted的这个组件来，我们在下面这个网站可以下载，找到对应自己Python版本的.whl文件下载即可

https://www.lfd.uci.edu/~gohlke/pythonlibs/

下载后我们找到这个文件来，复制它的文件地址即所在位置。使用pip命令安装即可

 pip install 文件所在位置

或者找到这个文件，在这个文件所在的文件夹下，按住shift键，然后右键从此处打开Powershell窗口，在powershell下面输入pip install 文件名 ，即可安装下载好的whl文件（小技巧：输入文件名开头几个字母，然后按Tab键就可以自动补全文件名）

安装完成后，我们再回到cmd窗口，输入Scrapy安装命令如下图，就可以成功安装scrapy了，

pip install Scrapy

 

我们可以通过pip list命令检查scrapy 库是否安装，或者通过Scrapy -h命令，如下图

pip list命令查询已安装的库