python爬虫时遇到proxyError (SSLError/_ssl.c:1076)的解决方法

电脑安装了selenium和chromedriver后,爬虫的加上proxies后就无法请求:

requests.exceptions.ProxyError: HTTPSConnectionPool(host='www.baidu.com', port=443): Max retries exceeded with url: / (Caused by ProxyError('Your proxy appears to only use HTTP and not HTTPS, try changing your proxy URL to be HTTP. See: https://urllib3.readthedocs.io/en/1.26.x/advanced-usage.html#https-proxy-error-http-proxy', SSLError(SSLError(1, '[SSL: WRONG_VERSION_NUMBER] wrong version number (_ssl.c:1076)'))))

网上收集了一些原因,包括是否开启了抓包工具、端口是否被占用、pyopenssl版本问题。

但我这里的解决方法是降低urllib的版本到1.23 。降低后就正常了。

这中间,实在没办法的临时方法是:把proxies写成 {‘http’:'xxxxxx'} ,不添加https也是可以继续爬的,但这样并不是完美的解决方案。

  • 3
    点赞
  • 4
    收藏
    觉得还不错? 一键收藏
  • 2
    评论
评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值