scrapy框架的安装心得

在我做分布式爬虫之前,我要先进行框架配置,这部分我在自我摸索的情况下确实有有点麻烦,在网上查了很多资料,最后还是配置成功,当然完成后我感觉随着步骤走下去也不是很难,因此我写出一点心得,希望可以帮到一些人:
1.首先我的系统是windows的,虽然我也装了一个Linux系统,还没在它上面开始实践,以后说不定会发一点心得。
2.我的python版本是python3.7,pycharm用的是2017版的。
3.要想配置scrapy框架,首先要做的是就是下载其他几个包,下载顺序是:
Wheel->lxml->PyOpenssl->Twisted->Pywin32->Scrapy
步骤如下:
首先我们在他们的官网上下载他们我给大家提供了网址,进去下载即可,当然要选择相应的:
wheel
pip install wheel
lxml
http://www.lfd.uci.edu/~gohlke/pythonlibs/#lxml
PyOpenssl
https://pypi.python.org/pypi/pyOpenSSL#downloads
Twisted
http://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted
Pywin32
https://sourceforge.net/projects/pywin32/files/pywin32/Build 220/
Scrapy
pip install scrapy
4.下载了包以后打开cmd->输入pip install +文件路径 即可安装
5.安装成功后输入scrapy出现下图就说明你的scrpay框架已经安装成功了
在这里插入图片描述

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值