在我们从网页爬取图片时,如果是在一个for循环中下载图片,那么控制台会一直提示不安全请求警告,建议添加安全证书:看的特别心烦
InsecureRequestWarning: Unverified HTTPS request is being made to host 'img.jdlingyu.com'. Adding certificate verification is strongly advised. See:
我们导入request模块,添加以下代码,屏蔽警告
requests.packages.urllib3.disable_warnings()
sslcontext = ssl.SSLContext(ssl.PROTOCOL_TLSv1)
sslcontext.verify_mode = ssl.CERT_NONE
[SSL: CERTIFICATE_VERIFY_FAILED] certificate verify failed:(_ssl.c:661))
如果在爬取数据时出现以上问题,可能时网站证书有问题,在python3中引入了ssl模块,可以忽略对网站证书的认证。
导入ssl包后加入以下代码:
ssl._create_default_https_context = ssl._create_unverified_context
这样可以全局取消证书,但是安全性嘛....
或者在使用request.get()时,加入verify=False,来取消对证书的认证,即
response = requests.get(url=url,headers=headers,verify=False)
同样可以解决问题