在使用Image-Downloader爬取图片时遇到一系列问题，包括SOCKSHTTPSConnectionPool的ConnectionError，尝试修改user-agent和代理设置无效。最终发现不使用代理可以成功连接。随后出现KeyError：'listNum'，通过直接指定total_num为数字仍报错。最终解决方案是切换到Bing模式，百度模式下无法正常工作。
Image-Download爬图片遇到的怪事
首先在https://github.com/sczhengyabin/Image-Downloader搞上代码，具体安装参见https://blog.csdn.net/m0_37992521/article/details/108306120
接下来问题来了
1、按照作者的配置方式
会报错
requests.exceptions.ConnectionError: SOCKSHTTPSConnectionPool， Failed to establish a new connection: [WinError 10061] 由于目标计算机积极拒绝，无法连接。
在网上查找了很多，改user-agent或者是改{‘connection’:‘close’}都没用，甚至研究了半天怎么改代理服务器。
结果干脆不选proxy可以直接爬！别选！
2、不选之后出现新问题
total_num = init_json[‘listNum’]
KeyError: ‘listNum’
源代码在crawler.py，因为也没仔细研究源码，我干脆把total_num改成数字又会报错:
0
最低0.47元/天 解锁文章
扫一扫
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
