requests 使用代理报错 Cannot connect to proxy.‘,FileNotFoundError(2, ‘No such file or directory问题解决

如题,使用代理报错,降级urllib3
不要使用1.26.0版本,安装低版本

pip install urllib3==1.25.11

更新======
因为本文篇幅的原因,所以在这里再多水一下,写点其他爬虫有关的东西:

如果说python提交的请求,使用fiddler抓不到包,请求会卡住。使用charles,python请求则会报错的情况,一般来说降级也是能解决问题的,加上verify=False就可以进行抓包了,会出现一些警告信息,无视就行,想要其不打印的,加入以下代码

from urllib3.exceptions import InsecureRequestWarning
requests.packages.urllib3.disable_warnings(InsecureRequestWarning)

在网页上复制的curl,像cmd和bash的不同,通过工具转换出来的python requests代码,请求头的部分参数有出入,比如sec-ch-ua

使用requests请求,拿set-cookie的时候,可能会有拿到的cookie与抓包信息不一致的问题

res.header["set-cookie"]  #建议用这种方式拿取set-cookie
res.cookie  	#这种方式拿取会出现漏cookie的现象

更新======
最近发现xshell 连接服务器加上 xftp的原因,导致fiddler打开时请求会报错,502,fiddler 证书问题
解决方法:关闭xshell + ftp

  • 8
    点赞
  • 13
    收藏
    觉得还不错? 一键收藏
  • 9
    评论
评论 9
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值