Python之爬虫urllib（三）-urllib.error

最新推荐文章于 2024-07-02 12:36:15 发布

ydw_ydw

最新推荐文章于 2024-07-02 12:36:15 发布

阅读量217

点赞数

分类专栏： Python 爬虫文章标签： Python 爬虫

本文链接：https://blog.csdn.net/ydw_ydw/article/details/81982676

版权

Python 同时被 2 个专栏收录

36 篇文章 2 订阅

订阅专栏

爬虫

15 篇文章 1 订阅

订阅专栏

urllib.error

案例1 ：

案例2：

urllib.error

（用 request.openurl() 都应该放在 try 中）

URLError产生的原因：
- 没网
- 服务器链接失败
- 找不到指定服务器
- 是OSError的子类
- 案例1
HTTPError, 是URLError的一个子类
- 案例2
两者区别：
- HTTPError是对应的HTTP请求的返回码错误, 如果返回错误码是400以上的，则引发HTTPError
- URLError对应的一般是网络出现问题，包括url问题
- 关系区别： OSError-URLError-HTTPError
- 最后值得注意的一点是，如果想用HTTPError和URLError一起捕获异常，那么需要将HTTPError放在URLError的前面，因为HTTPError是URLError的一个子类。如果URLError放在前面，出现HTTP异常会先响应URLError，这样HTTPError就捕获不到错误信息了。
- 如果不用上面的方法，也可以使用hasattr函数判断URLError含有的属性，如果含有reason属性表明是URLError，如果含有code属性表明是HTTPError。案例3

案例1 ：

'''
URLError的使用
'''

from urllib import request, error


if __name__ == '__main__':

    url = "http://www.baiiiiiiiiiidu.com"

    try:

        req = request.Request(url)
        rsp = request.urlopen( req )
        html = rsp.read().decode()
        print(html)

    except error.URLError as e:
        print("URLError: {0}".format(e.reason))
        print("URLError: {0}".format(e))

    except Exception as e:
        print(e)

案例2：

'''
URLError的使用
'''

from urllib import request, error


if __name__ == '__main__':

    url = "http:iiiiiiiiidu//www.baidu.com/welcome.html"

    url = "http://www.sipo.gov.cn/www"
    try:

        req = request.Request(url)
        rsp = request.urlopen( req )
        html = rsp.read().decode()
        print(html)

    except error.HTTPError as e:
        print("HTTPError: {0}".format(e.reason))
        print("HTTPError: {0}".format(e))

    except error.URLError as e:
        print("URLError: {0}".format(e.reason))
        print("URLError: {0}".format(e))

    except Exception as e:
        print(e)

案例3：

'''
URLError的使用
'''
from urllib import request, error

if __name__ == '__main__':

    #一个不存在的连接
    url = "http://www.baidu.com/oooooo"

    try:
        req = request.Request(url)
        rsp = request.urlopen( req )
        html = rsp.read().decode()
        print(html)
    except error.URLError as e:
        if hasattr(e, 'code')
            print("HTTPError")
            print(e.code)
        elif hasattr(e, 'reason')
            print("URLError")
            print(e.reason)