python error: [Errno 10054]

最新推荐文章于 2021-08-18 12:37:36 发布
最新推荐文章于 2021-08-18 12:37:36 发布
阅读量1w 收藏
点赞数
分类专栏： 爬虫 文章标签： python 爬虫
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/liyuetao680/article/details/48295083
版权

data = self._sock.recv(self._rbufsize)
error: [Errno 10054]

编写爬虫时，运行代码出现了如下的错误，
对一个网站使用大量的urlopen()操作，会被那个网站认为攻击行为，网站会把你封了，就有不允许下载的情况，导致urlopen()后，request.read()一直卡死在那，不能继续下去，最后会抛出这个异常。

即使添加了useragent，也会出现同样的问题。

解决方法：可以添加一些延时。隔一段时间访问一次。

一字腾云
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
python socket 超时设置 errno 10054
12-23
python socket.error: [Errno 10054] 远程主机强迫关闭了一个现有的连接。问题解决方案： 前几天使用python读取网页。因为对一个网站大量的使用urlopen操作，所以会被那个网站认定为攻击行为。有时就不再允许下载。...
Connection reset by peer 的解决
热门推荐
常城的专栏
08-21 13万+
下午用美国服务器测试一个程序。跑着跑着突然开链接了。重新链接后，发现程序报错了： ---------------------------------------- Exception happened during processing of request from ('114.249.209.233', 10101) Traceback (most recent call last)
python socket编程 实现简单p2p聊天程序
weixin_34185364的博客
07-19 1727
目标是写一个python的p2p聊天的项目，这里先说一下python socket的基础课程 一、Python Socket 基础课程 　　Socket就是套接字，作为BSD UNIX的进程通信机制，取后一种意思。通常也称作"套接字"，用于描述IP地址和端口，是一个通信链的句柄，可以用来实现不同虚拟机或不同计算机之间的通信。在Internet上的主机一 般运行了多个服务软件，同时提供几种服务。...
socket error 10054错误出现的原因及解决办法，全网最全没有之一
01-14 1万+
套接字是客户端-服务器通信的端点。 FTP socket error 10054指示远程主机已强制终止或重置FTP客户端的现有连接。并且，用户看到完整的错误消息，如下所示。 Upload failed. Socket Error#10054 Connection reset by peer. FTP socket error 10054产生的原因以及解决方案 1、远程服务器问题 由于...
Python：10054错误
Enn的数据库
03-21 1万+
python socket.error: [Errno 10054] 远程主机强迫关闭了一个现有的连接。 问题解决方案： 前几天使用python读取网页。因为对一个网站大量的使用urlopen操作，所以会被那个网站认定为攻击行为。有时就不再允许下载。导致urlopen()后，request.read()一直卡死在那里。最后会抛出errno 10054. 这个错误是connection res
（成功）ROS安装过程中如何解决 rosdep update 命令出现错误——安装记录
learning_man的博客
08-18 2万+
系统：ubuntu18.04 ros：ros-melodic 大部分解决办法转载自：https://zhuanlan.zhihu.com/p/392082731 1.sudo rosdep init报错（切换为手机热点init成功！） ERROR: Rosdep experienced an error: ('The read operation timed out',) Please go to the rosdep page [1] and file a bug report with the
【10054】错误，解决。
qq_43708315的博客
01-12 8265
pycharm安装nlltk出现的错误 在pycharm中安装nltk后还需进行nltk.download（）下载nltk_data 代码： import nltk nltk.download() 1、出现错误[winerror10054]：远程主机强迫关闭现有连接；连接被远程主机强行关闭。 错误原因： 1、自己的网络问题（网络卡顿，出现了断网） 2、你请求的网站被封了 3、访问的频率过快也会导...
python网络请求失败_Python POST请求失败，[Errno 10054]远程主机强行关闭了现有连接...
weixin_39881155的博客
12-10 809
我正在使用Beautiful Soup尝试抓取网页。 该代码很好用，但现在不起作用。 我认为问题是，源站点更改了他们的登录页面。 因此，我替换了loginurl，显然无法连接到该URL。 我可以直接连接到它。 那么有人可以尝试运行此命令并告诉我我做错了什么吗？import requestsfrom bs4 import BeautifulSoupimport reimport pymysqlimp...
Python socket.error: [Errno 98] Address already in use的原因和解决方法
01-20
socket.error: [Errno 98] Address already in use 这是因为在TCP/IP终止连接的四次握手中，当最后的ACK回复发出后，有个2MSL的时间等待，MSL指一个片段在网络中最大的存活时间，这个时间一般是30秒，所以基本上过60...
Python错误提示：[Errno 24] Too many open files的分析与解决
09-21
主要给大家介绍了Python中出现错误提示：[Errno 24] Too many open files的分析与解决，需要的朋友可以参考借鉴，下面来一起看看吧。
【Python3 网络编程】ConnectionRefusedError: [Errno 111] Connection refused
01-06
在网络通信中，经常出现Connection Refused报错提示，不仅仅是socket编程，也有xshell连接时出现这种问题。在查阅资料后，把常见问题记入本文。 服务器拒绝，有几个可能性： 服务器没启动或未监听端口（用TCP工具连...
Git提交代码提示 Connection was reset, errno 10054的一个解决方法
益添的博客
05-20 2万+
今晚要提交代码，发现Git报了错，代码push不上去，然后网上找了一些方法，都是敲一大堆命令，却好像还是解决不了，我知道，我又要写一篇文章了。 提示的问题 fatal: unable to access 'https://github.com/XXX/': OpenSSL SSL_read: Connection was reset, errno 10054 翻译：无法连接到XXX，连接被重置，错误码10054 说白了，就是一个无法连接到Git仓库的问题 背景（环境描述） 我的IDE是：ID
python socket.error: [Errno 10054] 解决方法
weixin_30830327的博客
05-12 769
我用的是python2.7 我搜网上10054错误解决方法的时候发现，大部分文章都是以python3为基础的，对于python2不适用。 python socket.error: [Errno 10054] 远程主机强迫关闭了一个现有的连接。 原因：服务器发现你的爬虫行为了，所有强制断开链接了 解决办法： 服务器知道你是爬虫，加headers, 模拟浏览器agent；head中...
python socket.error: [Errno 10054] 解决方法
zhengxiuchen86的博客
04-27 1654
python socket.error: [Errno 10054] 解决方法
python socket.error: [Errno 10054] 远程主机强迫关闭了一个现有的连接。
ykm18811712927的博客
05-22 2万+
因为对一个网站大量的使用urlopen操作，所以会被那个网站认定为攻击行为。有时就不再允许下载。导致urlopen()后，request.read()一直卡死在那里。最后会抛出errno10054. 这个错误是connection reset bypeer.也就是传说的远端主机重置了此连接。原因可能是socket超时时间过长；也可能是request =urllib.request.urlopen
python socket [Errno 10054]的解决方法
xiemanR的专栏
11-16 2万+
python socket [Errno 10054]的解决方法
Python网络编程Socket应用，并解决了error：10054错误
haeasringnar的博客
03-07 1万+
首先我们写一个客户端： import socket # 客户端 发送一个数据，再接收一个数据 client = socket.socket(socket.AF_INET,socket.SOCK_STREAM) #声明socket类型，同时生成链接对象 client.connect(('localhost',6969)) #建立一个链接，连接到本地的6969端口 while True: ...
python远程主机强迫关闭了_[转] python 远程主机强迫关闭了一个现有的连接 socket 超时设置 errno 10054...
weixin_31499919的博客
02-04 1929
python socket.error: [Errno 10054] 远程主机强迫关闭了一个现有的连接。问题解决方案：前几天使用python读取网页。因为对一个网站大量的使用urlopen操作，所以会被那个网站认定为攻击行为。有时就不再允许下载。导致urlopen()后，request.read()一直卡死在那里。最后会抛出errno 10054.这个错误是connection reset by ...
socket error: Errno 10053
最新发布
05-20
Errno 10053 是一个 Windows Sockets 错误代码，它表示在数据传输过程中发生了意外的网络中断。通常这是由于网络连接中断、主机重启或网络故障等原因引起的。如果您正在使用 Python 的 socket 模块进行网络编程，...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值