爬虫使用urllib库报错urllib.error.URLError: 「urlopen error [SSL: CERTIFICATE_VERIFY_FAILED] certificate veri

最新推荐文章于 2024-05-11 14:33:51 发布
最新推荐文章于 2024-05-11 14:33:51 发布
阅读量605 收藏
点赞数
分类专栏： 常见问题 python
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/outman_1921/article/details/107095231
版权

学习爬虫时，用urllib库，发现经常报错，查资料解决。

错误原因：

这是一个SSL证书验证错误，当请求一个https站点，但是证书验证错误时，就会报这样的错误。

解决办法：

只需在代码中加入如下两行将跳过证书的检查，即可成功访问网页。

import ssl
ssl._create_default_https_context = ssl._create_unverified_context
李梨同学丶
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
详解Python3网络爬虫(二)：利用urllib.urlopen向有道翻译发送数据获得翻译结果
01-20
上一篇内容，已经学会了使用简单的语句对网页进行抓取。接下来，详细看下urlopen的两个重要参数url和data，学习如何发送数据data 一、urlopen的url参数 Agent url不仅可以是一个字符串，例如:http://www.baidu.com...
解决python3 urllib中urlopen报错的问题
09-21
然而，在升级到Python3之后，可能会发现原本熟悉的`urllib`库的结构发生了变化，导致直接使用`urllib.urlopen`会引发错误。 #### 问题的出现 当你尝试在Python3中使用`urllib.urlopen`时，很可能会遇到以下错误： ...
urllib.error.URLError: ＜urlopen error [SSL: CERTIFICATE_VERIFY_FAILED] certificate verify failed: un
qq_42447728的博客
08-14 190
在main.py文件中加上。
【Pip】pip 安装第三方包异常:[SSL:CERTIFICATE_VERIFY_FAILED]解决方案
最新发布
寸铁的博客
05-11 2159
【Pip】pip 安装第三方包异常:[SSL:CERTIFICATE_VERIFY_FAILED]解决方案
下载Pytorch的自带数据集时报错=urllib.error.URLError: urlopen error [SSL: CERTIFICATE_VERIFY_FAILED]
小李的研究生学习日记
10-30 1万+
错误原因： 这是一个SSL证书验证错误，当请求一个https站点，但是证书验证错误时，就会报这样的错误。 解决办法： 只需在代码中加入如下两行将跳过证书的检查，即可成功访问网页。 # 全局取消证书验证 import ssl ssl._create_default_https_context = ssl._create_unverified_context ...
Python urllib.request 爬虫报错“SSL: CERTIFICATE_VERIFY_FAILED”
小马日记
01-03 3700
错误代码： import urllib.request #1.数据url url = 'http://www.yaozh.com/member/' #2.添加请求头 headers = { 'User-Agent':'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome...
pip安装框架时遇到:[SSL: CERTIFICATE_VERIFY_FAILED] certificate verify failed (_ssl.c:645)
drewings的博客
01-25 3556
在网上查了许多解决该问题的办法都没得到解决，看到很多网上解释说Python 升级到 2.7.9 之后引入了一个新特性，当使用urllib.urlopen打开一个 https 链接时，会验证一次 SSL 证书。而当目标网站使用的是自签名的证书时就会抛出一个urllib2.URLError: <urlopen error [SSL: CERTIFICATE_VERIFY_FAILED] cert...
python3的urllib.request.urlopen()报certificate verify failed (_ssl.c:749)
py_tester的博客
10-17 4783
当用urllib.request.urlopen一个 https 的时候会验证一次 SSL 证书, 当目标使用的是自签名的证书时就会爆出一个 URLError: urlopen error [SSL: CERTIFICATE_VERIFY_FAILED] certificate verify failed (_ssl.c:749)的错误消息;解决方法： import ssl context
【Solution】<urlopen error [SSL: CERTIFICATE_VERIFY_FAILED] certificate verify failed (_ssl.c:749)>
肓己CSDN
01-05 1530
笔者在使用Python的urllib模块的过程中遇到一个使之崩溃的异常，在尝试捕捉相关代码代码打印出了一下消息： urlopen error [SSL: CERTIFICATE_VERIFY_FAILED] certificate verify failed (_ssl.c:749)> 原因： 在查阅相关资料后发现是该urllib模块的特性导致 「Python 升级到 2.7.9 之后
requests，urllib，urllib3爬虫库使用
weixin_45080737的博客
04-03 1113
requests库是最好使用爬虫python第三方库，一般掌握是个请求参数就可以解决大部分问题了； urllib库与urllib3库这些标准库，也需要了解
Python爬虫课--第二节 爬虫请求模块 urllib.request，urllib.parse，requests模块
MiStonebridge的博客
08-20 2万+
1 urllib.request模块 1.1 版本 python2 ：urllib2、urllib python3 ：把urllib和urllib2合并,urllib.request 1.2 常⽤的⽅法 urllib.request.urlopen(“⽹址”) 作⽤ ：向⽹站发起⼀个请求并获取响应 import urllib.request # response是响应对象 response = urllib.request.urlopen('https://www.duitang.com/') # read
Python之urllib.request模块及requests模块
a1085217638的博客
04-30 1833
Python之urllib.request模块及requests模块 1. urllib.request模块1.1 版本1.2 常用的方法1.3 响应对象2. urllib.parse模块2.1 常用方法3. 请求方式4. requests模块4.1 安装4.2 request常用方法4.3 响应对象response的方法4.4 requests模块发送 POST请求4.5 requests设置...
python使用pip安装模块出现ReadTimeoutError: HTTPSConnectionPool的解决方法
01-20
今天使用pip安装第三库时，有时会报错： pip._vendor.urllib3.exceptions.ReadTimeoutError: HTTPSConnectionPool(host=’files.pythonhosted.org’, port=443): Read timed out. 使用镜像：pip install xxxx -i ...
Python库 | urllib3-1.25.9.tar.gz
05-24
资源分类：Python库 所属语言：Python 资源全名：urllib3-1.25.9.tar.gz 资源来源：官方 安装方法：https://lanzao.blog.csdn.net/article/details/101784059
解决TypeError: string indices must be integers, not str
热门推荐
李梨同学的博客
11-08 9万+
遇到问题 ExtendValue = { "area": "1", "info": "{\"year\": 2014, \"a\": 12, \"b\": 3, \"c\":5}", "trip_country": "CN" } 在按照字典访问的时候，报错。TypeError: string indices must be integers, not str,意思是索引必须是int型不能是字符型。 错误原因 （出这种错误有多种可能，我只记录我遇到
电脑开机提示EFI Netword 0 for ipv4 boot failed的原因及解决方法
李梨同学的博客
02-04 7万+
电脑开机提示EFI Netword 0 for ipv4 boot failed的原因及解决方法 今天上午正在我努力工作（huashui）的时候，收到了一位妹纸的求助。电脑开机提示efi network 0 for ipv4 boot failed image-20200628103101973 经过排查和查阅资料发现一共有两个原因导致此问题。 1.bios信息错误有可能造成此问题，解决方法是恢复bios出厂设置 开机或者重启电脑连续按“DEL”键，进入BIOS.按方向键选中“Exit”,会出
1292 - Incorrect datetime valuemysql插入非法的时间数据解决方案
李梨同学的博客
06-13 1万+
1292 - Incorrect datetime valuemysql插入非法的时间数据解决方案 1292 - Incorrect datetime value: ‘0000-00-00 00:00:00’ for column ‘targetTime’ at row 1 的解决方案 前言 由于测试需要，需要在mysql中插入0000-00-00 00:00:00这种非法数据。实际报错：1292 - Incorrect datetime value 错误原因 ’0000-00-00’保存为“伪日期”，但是
解决Linux系统find: ‘/run/user/1000/gvfs’: 权限不够
李梨同学的博客
05-15 1万+
当我在find文件时，经常会出现权限不够的情况是怎么回事呢，有没有搞错，老子登陆的就是root账户啊喂！ [root@localhost ~]# find / -name mysql find: ‘/run/user/1000/gvfs’: 权限不够 笔者经过了一番严谨的思考（google）,得出如下解决办法。官方说这是一个bug[bug#615848]，原因是FUSE文件系统和权限不配的问题，全局搜索时碰到它就会退出报错。其实这个目录是空的，查不查都没关系。所以，以下解决方式比较简.
mac完美解决NotADirectoryError: [Errno 20] Not a directory: ‘chromedriver
李梨同学的博客
08-01 8804
在用pyechart库画图时需要snapshot-selenium渲染成图片，发现代码没问题但是报错NotADirectoryError: [Errno 20] Not a directory: 'chromedriver’查阅资料得知是没有安装驱动。 1.安装驱动 解决方案：下载Chrome的相关对应版本驱动http://chromedriver.storage.googleapis.com/index.html ​ 下载Firefox的相关对应版本驱动 https://github.c
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值