warframe远程主机强迫关闭_使用Python爬虫,出现[WinError 10054] 远程主机强迫关闭了一个现有的连接。...

目标:找到原因为什么会出现这个bug解决它

https://www.pythonf.cn/read/37966​www.pythonf.cn

看完上面的文章后,原因是请求的太频繁对方服务器觉得我们在恶意攻击……明明只是想蹭点数据好吧。试了一下reponse.close(),保险起见,加了time.sleep()增加请求之间的停顿间隔,然后就成功了

import time
==========================================
vf = open(r'C:/Users/USER/Desktop/爬取疫情数据/数据json/video/videoinfo.json','r')
vf = vf.read()
vf = re.sub(r"[|]","",vf)
vf = vf.split(',')
videoList =[]
for each in vf:
    each = json.loads(each)
    url = each['URL']
    response = requests.get(url,head,verify=False)
    response.close()#用在请求后面
    response = response.text
    videoList.append(response)
    time.sleep(2)

    print("wancheng")
    
print(videoList)
===========================================

79949cd2f4cf1e781446a95c5da57add.png

Peace out!

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值