Scrapy框架的安装+在Pycharm中项目的创建

scrapy框架的安装

1. pip install wheel
2. 下载twisted，下载地址为http://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted
3. pip install pywin32
4. pip install scrapy
5. 测试：在终端里录入scrapy指令，没有报错即表示安装成功！。

安装过程中遇见的错误

1. ‘scrapy’ 不是内部或外部命令，也不是可运行的程序

因为没有配置系统变量

解决办法
在编辑中添加scrapy的地址即可

项目的创建

1. scrapy startproject xxxPro
   项目的创建
   

2. 在spiders子目录中创建一个爬虫文件
   
   1. 在创建前先进入FirstName
   ---------cd cd xxxPro
   2. scrapy
   代码如下：

    scrapy genspider spiderName www.xxx.com
    其中spiderName是所创建的名字	
   

3.创建文件的内部结构

4.成功执行