- 安装scrapy爬虫框架
可以使用镜像安装,安装速度比较快
pip install -i https://pypi.douban.com/simple/ scrapy
一般的安装方法
pip install scrapy
在安装过程中会遇到很多问题
error: Microsoft Visual C++ 14.0 is required. Get it with “Microsoft Visual C++ Build Tools”: http://landinghub.visualstudio.com/visual-cpp-build-tools
遇到上述错误,去安装 Microsoft Visual C++ Build Tools 即可,点击下载
(下载链接:https://go.microsoft.com/fwlink/?LinkId=691126)
有时也会因为 Twisted 安装失败出现此问题,如果有则下载安装,
https://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted
cp37表示python3.7版本,amd64表示windows系统是64位的,不过一般安装上边的32位的就可以了
进入下载目录,安装.whl文件
pip install xxx.whl
安装成功后再执行
pip install -i