爬取猫咪图片——自动化批量下载

最新推荐文章于 2022-11-15 15:11:30 发布

置顶

aguang5241

最新推荐文章于 2022-11-15 15:11:30 发布

阅读量930

点赞数 2

分类专栏：技术项目文章标签： Python 爬虫

本文链接：https://blog.csdn.net/aguang5241/article/details/99702529

版权

爬取猫咪图片——自动化批量下载

基于上一篇博文爬取猫咪照片进行自动化批量下载。

问题1.异常处理
解决方案：

try:
	(code...)
except urllib.error.HTTPError as e:
    print(e.reason, e.code, e.headers, sep = '\n')
except urllib.error.URLError as e:
    print(type(e.reason))
    if isinstance(e.reason, socket.timeout):
        print('>>>time out')
else:
    (code...)

问题2.网络响应问题造成的程序卡顿
解决方案：加入尝试次数，代码如下：

max_try_time = 5
i = 0
for tries in range(max_try_time):
	try:
	(code...)
	except urllib.error.HTTPError as e:
    	print(e.reason, e.code, e.headers, sep = '\n')
	except urllib.error.URLError as e:
    	print(type(e.reason))
    	if isinstance(e.reason, socket.timeout):
        	print('>>>time out--try %d times' % (t