1.pyspider 在win10 64位系统下安装64位3.5版本python,运行时出错。
解决方式安装32位python。
2.pip 安装pyspider时遇到lxml出错。
解决方式:
1. 安装wheel,命令行运行:
pip install wheel
2.在这里下载对应的.whl文件,注意别改文件名! http://www.lfd.uci.edu/~gohlke/pythonlibs/#lxml
3. 进入.whl所在的文件夹,执行命令即可完成安装
pip install 带后缀的完整文件名
3. HTTP 599: SSL certificate problem: unable to get local issuer certificate错误
错误原因:
这个错误会发生在请求 https 开头的网址,SSL 验证错误,证书有误。
解决方法:
使用 self.crawl(url, callback=self.index_page, validate_cert=False)
这个方法基本可以解决问题了。