1.http连接太多没有关闭导致的,解决方法:
import requests
requests.adapters.DEFAULT_RETRIES = 5 # 增加重连次数
s = requests.session()
s.keep_alive = False # 关闭多余连接
s.get(url) # 你需要的网址
2.访问次数频繁,被禁止访问,解决方法:使用代理
import requests
s = requests.session()
url = "https://mail.126.com/"
s.proxies = {"https": "57.10.114.47:8000", "http": "32.218.1.7:9999", }
s.headers = header
s.get(url)
爬取代理可参考:https://blog.csdn.net/z564359805/article/details/88875013