python爬虫基础--3(urllib.error异常)

最新推荐文章于 2021-06-20 00:51:19 发布

qq_43109978

最新推荐文章于 2021-06-20 00:51:19 发布

阅读量238

点赞数 1

分类专栏：爬虫

本文链接：https://blog.csdn.net/qq_43109978/article/details/95740223

版权

爬虫专栏收录该内容

8 篇文章 1 订阅

订阅专栏

一.urllib.error

urllib.error可以接收由urllib.request产生的异常。urllib.error有两个方法，URLError和HTTPError。

1.URLError

from urllib import request
from urllib import error


if __name__ == "__main__":
    url = "http://www.iloveyou.com/"
    req = request.Request(url)
    try:
        response = request.urlopen(req)
    except error.URLError as e:
        print(e.reason)

可以看到获取地址信息失败[Errno 11002] getaddrinfo failed

2，HTTPError

from urllib import request
from urllib import error


if __name__ == "__main__":
    url = "http://www.douyu.com/zhaoheng.html"
    req = request.Request(url)
    try:
        response = request.urlopen(req)
    except error.HTTPError as e:
        print(e.code)

运行之后，我们可以看到404，这说明请求的资源没有在服务器上找到,www.douyu.com这个服务器是存在的，但是我们要查找的zhaoheng.html资源是没有的，所以抛出404异常

二.URLError和HTTPError混合使用

值得注意的一点是，如果想用HTTPError和URLError一起捕获异常，那么需要将HTTPError放在URLError的前面，因为HTTPError是URLError的一个子类。如果URLError放在前面，出现HTTP异常会先响应URLError，这样HTTPError就捕获不到错误信息了。

from urllib import error

if __name__ == "__main__":
    #一个不存在的连接
    url = "http://www.douyu.com/zhaoheng.html"
    req = request.Request(url)
    try:
        responese = request.urlopen(req)
    except error.URLError as e:
        if hasattr(e, 'code')
            print("HTTPError")
            print(e.code)
        elif hasattr(e, 'reason')
            print("URLError")
            print(e.reason)