成功解决:python爬虫http.client.RemoteDisconnected: Remote end closed connection without response

本文介绍了在使用Python爬虫时遇到http.client.RemoteDisconnected错误的原因和解决方法。错误通常由于缺少User-Agent头部导致。解决方案是在请求头中添加User-Agent。
摘要由CSDN通过智能技术生成

参考:Python 爬虫:http.client.RemoteDisconnected: Remote end closed connection without response 问题解决
使用python爬虫中的urllib 或者 requests 库获取数据时
出现报错:

http.client.RemoteDisconnected: Remote end closed connection without response

原因:
大多数网站都会对用户请求中的 User-Agent 进行检测,如果没有在请求头中设置 User-Agent,那么就会抛出异常
改进方法:在headers中添加:User-Agent

import urllib.request
# 要访问的地址
headers = {
   
        "User-Agent": "Mozilla/5.0 (Windows NT 10.0; W
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值