python桌面爬虫_爬虫项目实战十三：爬取zol桌面壁纸

目标

爬取zol桌面壁纸，批量下载图片。

项目准备

软件：Pycharm

第三方库：requests,fake_useragent,re,lxml

网站地址：http://desk.zol.com.cn/1920x1080/

项目分析

打开网站看一下。

每一个都是一个图集。

点开

查看源代码

可以看出每一个都可以在源代码中找到。判定为静态网页。

页码分析

第一页url链接：http://desk.zol.com.cn/1920x1080/1.html

第二页url链接：http://desk.zol.com.cn/1920x1080/2.html

第三页url链接：http://desk.zol.com.cn/1920x1080/3.html

可以发现每一页随着后面的数字而变化。

反爬分析

同一个ip地址去多次访问会面临被封掉的风险，这里采用fake_useragent，产生随机的User-Agent请求头进行访问。

代码实现

1.导入相对应的第三方库，定义一个class类继承object，定义init方法继承self，主函数m