之前看出好多关于使用Python爬虫的文章,但是都不怎么全,步骤不是很详细,对于我这种纯小白来说有点难,直到自己真正的安装 并且调试完,才知道内衣部都不是那么容易,过程中会出现很多问题,下面我将详细的说一下我碰到的问题,希望对大家有帮助。
一、所需工具
运行平台:window7
Python:Python3.4
联网(哈哈)
二、步骤
1、确认Python版本
在“开始”里输入cmd,调出“命令提示符”输入python,查看版本
2、下载Lxml、Twisted、Scrapy
进入http://www.lfd.uci.edu/~gohlke/pythonlibs/,根据Python版本下载相应的第三方库(一定要确认好版本!!!)
下载后,把这三个库放在一个文件夹中,例如C:\Users\Administrator\Desktop\scrapy
3、安装Lxml、Twisted、Scrapy
再次进入cmd,切换目录,输入cd C:\Users\Administrator\Desktop\scrapy
这时就可以进行安装了,依次输入下列命令:
a.pip3 install wheel