Scrapy的安装
在Windows上安装scrapy的一些小坑
Scapy是一个高级的爬虫框架,其功能也很强大,但是不可以直接在命令行pip install scrapy安装成功总会报错
在Windows下的安装只要把下面四个依赖库安装一下Scrapy的安装就迎刃而解了
首先打开Windows下的命令行窗口
- 第一个依赖库 lxml;
- 第二个依赖库 pyOpenSSl ;
- 第三个依赖库 Twisted ;
- 第四个依赖库 pywin32 ;
第一个依赖库 lxml;
在直接在命令行输入 pip install lxml 就可以安装上
第二个依赖库 pyOpenSSl;
在直接在命令行输入 pip install pyOpenSSL 就可以安装上
如若失败:可以采用下面的方法
1.进入此网站https://pypi.org/project/pyOpenSSL/下载whl文件
2.下载的whl文件保存到下图自己对应的路径,以免出现不必要的麻烦