python怎么安装scrapy_windows下安装python+scrapy

最近忽然有了想要学习python爬虫的想法,但是首先需要安装工具。python安装倒是很轻松,只要傻瓜式一键安装即可,但是在Windows下安装scrapy倒不是件容易的事情。言归正传,说下我从昨天下午到今天上午安装的步骤:

1、python的安装

进入python的官网https://www.python.org/,点击downloads选项进入下载页,如图:

bVRHaw?w=1392&h=292

根据自己的机型,选择下载对应的安装包,我下载的是python 3.5.3版本的:

bVRHcS?w=605&h=221

选定下载位置,傻瓜式一键安装即可。实际上,32位和64位的版本安装起来没有区别,双击打开后,第一步要记得勾上add python to Path 选项,这样的好处是自动配置环境变量

bVRHee?w=507&h=371

可在命令提示符中用命令python --version,验证安装是否成功:

bVRHeH?w=469&h=159

到此,python已经安装好了!!!是不是hin简单~接下来安装scrapy吧^-^

2、scrapy的安装

先安装pywin32,进入https://sourceforge.net/proje...,下载与已安装python版本对应的pywin64安装包,例如python3.4 64位对应的安装包为pywin32-218.win-amd64-py3.4.exe,下载完成后一直next安装,依然是傻瓜式安装法

bVRHmj?w=674&h=364

检查安装结果,在python命令行输入import win32api,如果没有报错说明安装完成,如果报错说明PYTHONPATH环境变量没有配置

bVRHne?w=593&h=166

配置PYTHONPATH环境变量,将python安装目录下lib目录中的site-packages路径添加到PYTHONPATH环境变量,再次检验安装结果

bVRHnG?w=353&h=139

bVRHqT?w=581&h=242

bVRHsl?w=593&h=443

打开命令提示符窗口,输入命令:

pip install D:downloadsTwisted-16.4.1-cp35-cp35m-win_amd64.whl(下载好的twisted模块的whl文件路径),盗一下别人的图

bVRHvc?w=800&h=168

再输入命令:pip --version,检查安装是否成功

bVRHt3?w=794&h=114

3、pip的安装,估计因为我安装的版本自动配置环境变量,所以我好像没有下载pip,就可以用pip命令

如图:

bVRHzI?w=520&h=157

但是,如果安装pip的话,同样要去python的官网下载,下载地址是https://pypi.python.org/pypi/... ,选择相应版本下载,下载完成之后,解压到文件夹。在该文件夹的目录下使用控制台命令:输入python setup.py install;并添加入环境变量。

bVRHBD?w=800&h=545

好啦!一切准备工作就绪,现在开始安装scrapy~

twisted库安装成功后,安装scrapy就简单了,在命令提示符窗口直接输入命令: pip install scrapy 回车

bVRHEh?w=759&h=349

现在一切都搞定了,可以新建一个Scrapy测试,敲一个基于Scrapy框架的爬虫程序咯。

心得:Windows下的安装过程还是很麻烦的,因为有很多依赖要添加,不过在各方查找资料以后仿佛就不是那么难了!一步一步在cmd中运行测试,还要看错误提示,少哪一个依赖就下载哪一个安装哪一个!环境框架已经搭好,接下来就是学习如何写爬虫程序了。

再贴两个链接吧:

1、 https://segmentfault.com/a/11...

2、 http://jingyan.baidu.com/arti...

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值