Python换源与安装scrapy
换源
python自带的pip源速度较慢,这时可以考虑换源,例如:
pip install -i https://pypi.tuna.tsinghua.edu.cn/simple scrapy #使用清华镜像源
其中:
pip install scrapy #使用默认源进行下载安装
这种方法为一次性更改源,也可以永久性解决,但是目前使用其他博主所提供的永久换默认源方法没成功,等以后换源成功后再写。
下载并安装Twisted
在第一次安装scrapy框架时产生报错
通过查看报错提示信息发现,(在python3.6以上版本安装scrapy框架是会报错缺少Microsoft Visual C++ Build Tools参考的博客文章)此时应该下载自己所需要的Twisted版本.whl文件。
Twisted网址,下载对应.whl文件
https://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted
其中Twisted的版本取决于你所安装的python版本,我的python版本为3.7win32,所以应该选择Twisted-19.2.1-cp37-cp37m-win32.whl
如果下载错误则无法安装成功
例如:
当下载好之后,将下载的whl文件剪切到python的soripts文件夹下
然后输入安装命令:
pip install .\Twisted-19.2.1-cp37-cp37m-win32.whl #.\为使用文件下的包进行安装
至此Twisted安装成功
安装scrapy
当Twisted安装成功后就可以进行scrapy框架的安装了
至此scrapy框架安装成功