随笔- 3 文章- 0 评论- 0
windows7 64,32位下scrapy爬虫框架的环境搭建
一、
1.下载python
根据自己的需求,到官网下载适合自己电脑的版本,https://www.python.org/downloads/,我这里选择的 是python2.7.
2.安装python
安装过程十分简单,除了选择路径,一路next到底即可
3.配置环境变量
找到python的安装路径。C:\Python27;script的路径:C:\Python27\Scripts;配置到环境变量。
4、打开命令提示符: win+R ,输入 cmd 。输入 python,回车。显示python的版 本信息就表明安装成 功。如图所示:
二 安装pip
1.我们安装pip。我们同样需要在Python的官网上去下载,下载地址是: https://pypi.python.org/pypi/pip#downloads :
2.下载完成之后,解压到一个文件夹,用CMD控制台进入解压目录,
输入:python setup.py install
安装玩之后在CMD控制台输入pip –version,下图表示安装成功
三 安装pywin32
在Windows下,必须安装pywin32,下载地址:https://sourceforge.net/projects/pywin32/,安装过程也很简 单, 一路next到底,
安装完之后进入CMD控制台输入python
进入python之后输入import win32com,没有报错表示安装成功,如下图
四 安装lxml
打开cmd,输入pip installlxml。
安装成功在cmd中输入python,然后输入import lxml进行验证,如下图表示安装成功
五 安装setuptools
官网下载setuptools(http://pypi.python.org/pypi/setuptools)& 傻瓜安装
也可以使用pip进行安装 pip install setuptools
安装成功在cmd中输入python,然后输入import setuptoolsl进行验证,如下图表示安装成功
六、安装Zope.Interface
官网下载Zope.Interface(http://pypi.python.org/pypi/zope.interface/)& 傻瓜安装
也可使用pip进行安装pip install Zope.interface
安装成功在cmd中输入python,然后输入import Zope.Interfacel进行验证,如下图表示安装成功
七 安装Twisted
官网下载Twisted(http://twistedmatrix.com/trac/wiki/Downloads)& 傻瓜安装,()
安装成功在cmd中输入python,然后输入import Twisted进行验证,如下图表示安装成功
八 安装w3lib
官网下载w3lib(http://pypi.python.org/pypi/w3lib) 安装
#进入插件目录并执行命令安装
>D:\python-plugin\w3lib-1.3>python setup.py install
进入cmd输入python,然后import w3lib进行验证
九安装libxml2
官网下载libxml2(http://users.skynet.be/sbi/libxml-python/)& 傻瓜安装
进入cmd输入python,然后输入import libxml2进行验证
十安装pyOpenSSL
官网下载pyOpenSSL(https://pypi.python.org/pypi/pyOpenSSL)& 傻瓜安装
十一安装scrapy
打开cmd控制台输入 pip installscrapy
然后打开cmd输入scrapy,如下图表示安装成功