小白教你一步一步安装Scrapy(西瓜皮)(带图带资源)

一、介绍西瓜皮

Scrapy(西瓜皮)是一个为了爬取网站数据、提取结构性数据而编写的应用框架,可以应用在包括数据挖掘、信息处理或者存储历史数据等一系列的程序中。

二、注意事项

目前Scrapy不支持Python3,因此需要安装Python2.7来使用Scrapy,Python2.7和3是可以共存的。

三、安装Python2.7

下载网址:https://www.python.org/downloads/release/python-2715/

这里选择windows 32位(32位可以兼容32位与64位系统,反之不行)


下载完成后,点击安装


怎样查看是否安装成功:

方式有很多,这里可以打开IDLE,输入help()



安装完成后到所有程序中找到python2.7下的IDLE,右键发送到桌面快捷方式(为了方便,不是必须)

找到python2.7的安装目录下的脚本文件:


点击右键编辑,选择2.7版本对应的IDLE,选择上面的run module F5


完成设置环境变量

四、安装pywin32(32位版本)

地址为:https://sourceforge.net/projects/pywin32/files/pywin32/Build%20219/

是个exe文件,点击安装即可


五、安装pip

地址:https://pip.pypa.io/en/stable/installing/

pip实际上是Python的一个安装软件的模块

下载get-pip.py然后还是打开运行同上。

六、安装lxml

虽然可以用pip安装lxml,但如果是windows,建议不要,使用lxml专门为windows提供的安装包

网址:https://www.lfd.uci.edu/~gohlke/pythonlibs/#lxml


找到下面的lxml


选择对应版本下载并安装

七、使用pip安装pyOpenSSL

在两个Python版本并存的情况下,使用pip安装时,命令为:py -2 -m install pyOpenSSL

如果提示你pip需要升级则执行:




注意:

这里pip安装需要微软的VS2008C语言编译器,没有安装或者版本太高也是不行,也可以安装微软为Python准备的:

VCForPython27.msi


地址:

http://www.microsoft.com/en-us/download/details.aspx?id=44266

八、安装Scrapy

双版本并存下,使用:py -2 -m install Scrapy

验证是否安装成功

九、参考文档

python 32位和64位的区别在哪:

https://blog.csdn.net/badao_liumang_qizhi/article/details/80977544


命令行下升级pip版本:

https://blog.csdn.net/badao_liumang_qizhi/article/details/80978172



使用pip来安装pyOpenSSL:

https://blog.csdn.net/badao_liumang_qizhi/article/details/80978036


当同时安装Python2和Python3后,如何兼容并切换使用详解(比如pip使用):

https://blog.csdn.net/badao_liumang_qizhi/article/details/80979780


安装Scrapy时:Microsoft Visual C++ 9.0 is required:

https://blog.csdn.net/badao_liumang_qizhi/article/details/80979789


Python两个版本共存时,通过pip安装Scrapy:

https://blog.csdn.net/badao_liumang_qizhi/article/details/80979880


python 怎么验证是否安装成功 scrapy:

https://blog.csdn.net/badao_liumang_qizhi/article/details/80979894

十、资源合集


下载地址:


https://download.csdn.net/download/badao_liumang_qizhi/10531943

如果这篇文章帮助到了你,欢迎打赏鼓励,您的鼓励是我最大的动力!


评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

霸道流氓气质

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值