Scrapy 安装

Window 下安装

环境：
* window 10 x64
* Python3.5

1. 创建虚拟环境

   python -m venv 环境名称
   例如：
   python -m venv web_env

2. 激活虚拟环境
   进入到上一步创建的web_env目录下的Scripts执行

   >activate

3. 通过豆瓣安装scrapy

   (article_spider)  F:\PyEnv\web_envr\Scripts>pip install -i https://pypi.douban.com/simple/ scrapy
   

4. 安装过程如果出现以下错误
   
error: Microsoft Visual C++ 14.0 is required. Get it with "Microsoft Visual C++ Build Tools": http://landinghub.visualstudio.com/visual-cpp-build-tools


解决办法:

下载对应版本Twisted whl
手工安装：(article_spider) F:\PyEnv\article_spider\Scripts>pip install C:\Users\AlexPC\Desktop\ElasticSearchInstall\Twisted-17.9.0-cp35-cp35m-win_amd64.whl

之后再安装scrapy，安装成功
(article_spider) F:\PyEnv\article_spider\Scripts>pip install -i https://pypi.douban.com/simple/ scrapy

安装完毕。