前言
手机壁纸这东西大家都很熟悉吧,相信不论谁打开手机都希望自己的壁纸是自己喜欢的图片,
但是一张壁纸用久了就会想换一张新鲜感满满的图(当然排除情有独钟的),
但挑选图片的时间总是恒久的,有时长时间的挑选都不一定能选出自己心仪的那一张,还手累
那么咋直接来写个代码,自动下载自己感兴趣类型的手机壁纸
本次内容:
python爬取4K超清画质手机壁纸
开发环境
敲代码你们不能连敲代码的地方都没有叭👀
- Python 3.8
- Pycharm
如何配置pycharm里面的python解释器?
- 选择file(文件) >>> setting(设置) >>> Project(项目) >>> python interpreter(python解释器)
- 点击齿轮, 选择add
- 添加python安装路径
pycharm如何安装插件?
- 选择file(文件) >>> setting(设置) >>> Plugins(插件)
- 点击 Marketplace 输入想要安装的插件名字 比如:翻译插件 输入 translation / 汉化插件 输入 Chinese
- 选择相应的插件点击 install(安装) 即可
- 安装成功之后 是会弹出 重启pycharm的选项 点击确定, 重启即可生效
模块使用
第一个模块是要安装的,不然即使你代码出来了,没有模块它还是会不高兴,会报错的呦,另两个模块是自带的,不需安装
- requests >>> pip install requests 数据请求
- re 正则 解析数据
- os 自动创建文件夹
很多小伙伴安装模块时不知道怎么安装或报错原因,现在给大家详细讲解一下
- 如果安装python第三方模块:
- win + R 输入 cmd 点击确定, 输入安装命令 pip install 模块名 (pip install requests) 回车
- 在pycharm中点击Terminal(终端) 输入安装命令
- 安装失败原因:
-
失败一: pip 不是内部命令
解决方法: 设置环境变量 -
失败二: 出现大量报红 (read time out)
解决方法: 因为是网络链接超时, 需要切换镜像源
清华:https://pypi.tuna.tsinghua.edu.cn/simple
阿里云:http://mirrors.aliyun.com/pypi/simple/
中国科技大学 https://pypi.mirrors.ustc.edu.cn/simple/
华中理工大学:http://pypi.hustunique.com/
山东理工大学:http://pypi.sdutlinux.org/
豆瓣:http://pypi.douban.com/simple/
例如:pip3 install -i https://pypi.doubanio.com/simple/ 模块名 -
失败三: cmd里面显示已经安装过了, 或者安装成功了, 但是在pycharm里面还是无法导入
解决方法: 可能安装了多个python版本 (anaconda 或者 python 安装一个即可) 卸载一个就好
或者你pycharm里面python解释器没有设置好
-
我们要实现一个爬虫案例
第一步要做事情:
就是去分析我们想要的这些数据内容, 可以从哪里获取 (开发者工具去抓包分析)
通过分析可以知道, 想要获取壁纸原图url >>> 获取每个壁纸详情页url >>> 列表页面获取 壁纸详情页