防反爬小技巧 | [WinError 10054] 远程主机强迫关闭了一个现有的连接。
其实也称不上技巧,但就像open之后没有close,new之后没有delete[]一样,我们总是容易忽略。爬取网站数据过程中若出现以下错误,有可能是网站正在挣扎,将爬虫程序识别了出来,关闭我们的请求。ConnectionResetError: [WinError 10054] 远程主机强迫关闭了一个现有的连接。urllib3.exceptions.ReadTimeoutError: HTTPConnectionPool(host='d1.weather.com.cn', port=80): Rea.
原创
2021-11-27 15:40:12 ·
3576 阅读 ·
1 评论