安装
1. 安装‘scrapy':通过 'pip install scrapy' 即可安装。
2. 如果在windows下,还需要安装 'pipwin32',如果不安装,那么以后运行scrapy项目的时候会报错。安装方式:'pip install pipwin32'.
3. 如果在Ubuntu下,还需安装一些第三方库:'sudo apt-get install python-dev python-pip libxml2-dev libxslt1-dev zlib1g-dev libffi-dev libssl-dev'。
创建项目
1、创建项目:'scrapy startproject [爬虫的名字]'
2、创建爬虫:进入项目根目录,'scrapy genspider [爬虫的名字][爬虫的域名]'
(注意:爬虫的名字不能与项目重名)