scrapy安装py3.7( Could not find a version that satisfies the requirement pywin32-224-cp37-cp37m-win_)

转载:https://blog.csdn.net/see_you_see_me/article/details/83027179
原作者:see_you_see_me


我的经验:
先pip install wheel
安装pywin32,再安装lxml、twist
进入指定目录的方法:cd

安装pywin32的时候遇到一个坑,
下好pywin32-224-cp37-cp37m-win_amd64 .whl文件后
运行pip isntall pywin32-224-cp37-cp37m-win_amd64 .whl
得到:Could not find a version that satisfies the requirement pywin32-224-cp37-cp37m-win_amd64 (from versions: )
No matching distribution found for pywin32-224-cp37-cp37m-win_amd64
检查后:发现不知道为什么网站下在的文件名 [ .whl]前面有一个空格
.whl前有空格
将之删除,且运行pip isntall pywin32-224-cp37-cp37m-win_amd64.whl 即可!

创建scrapy的方法:cd 你要创建的位置:ex:cd Desktop
scrapy start @#$%(名字) ex:scrapy start Myfirstproject


原文:


有很多同学反馈安装scrapy总失败,其实有个简单的方法,今天总结一下

一、爬虫框架Scarpy简介
Scrapy 是一个快速的高层次的屏幕抓取和网页爬虫框架,爬取网站,从网站页面得到结构化的数据,它有着广泛的用途,从数据挖掘到监测和自动测试,Scrapy完全用Python实现,完全开源,代码托管在Github上,可运行在Linux,Windows,Mac和BSD平台上,基于Twisted的异步网络库来处理网络通讯,用户只需要定制开发几个模块就可以轻松的实现一个爬虫,用来抓取网页内容以及各种图片。

二、安装Scarpy依赖的包

wheel
Lxml
twisted
Pywin32 
其中Twisted在windows上安装时需要依赖 Microsoft Visual C++ 14.0进行编译,如果没有这个环境在安装时必然报错,一般提示信息是这样的:

error: Microsoft Visual C++ 14.0 is required. Get it with "Microsoft Visual C++ Build Tools": http://landinghub.visualstudio.com/visual-cpp-build-tools

经过多次尝试之后,发现可以单独安装上面的依赖包,就可以顺利的安装好Scarpy

wheel可以直接安装 pip install wheel

下面给出剩下的3个的下载路径:
https://www.lfd.uci.edu/~gohlke/pythonlibs/#lxml
https://www.lfd.uci.edu/~gohlke/pythonlibs/#pywin32
https://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted

点击这里的lxml链接直接跳转到页面后面的相关列表:

这里有好多,应该选择哪个呢?文件名里面的cp37m表示for python3.7版本,win32表示32位版本,amd64是对应amd的cpu
根据自己的环境选择正确的版本,twisted、Pywin32都是同样的方法。

我的环境是Python3.7 32位版本,因此我选择的是pywin32-224-cp37-cp37m-win32.whl

点击链接后直接开始下载,下载完成可以安装,下面是安装过程

首先我升级了pip,然后安装了wheel并且测试了wheel

安装pywin32-224-cp37-cp37m-win32.whl,卸载以前安装的lxml,重新安装lxml-4.2.5-cp37-cp37m-win32.whl

下面是安装scrapy

可以看到scrapy已经安装成功,接下来就来验证一下

三、验证安装结果

我们创建一个新的Scrapy项目:

scrapy startproject tutorial
 
 

至此在Python3.7下安装Scrapy已经安装成功,可以愉快的用这个做很多有趣的事情啦

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值