python3-张子枫图片爬取

最新推荐文章于 2020-12-04 13:07:48 发布

九月离少

最新推荐文章于 2020-12-04 13:07:48 发布

阅读量2.4k

点赞数 1

分类专栏： python3爬虫文章标签： python

本文链接：https://blog.csdn.net/weixin_37979343/article/details/108391801

版权

本文介绍了使用Python3爬取某网站张子枫图片的过程。通过分析请求URL，发现pn参数与每页图片数量有关，通过迭代pn值获取多页图片。在抓取过程中，发现当pn达到1350时返回空值，因此在程序中加入判断。最终成功抓取1000多张图片，并提供了百度网盘的链接。

摘要由CSDN通过智能技术生成

Life is short, You need Python

想搞点妹妹图片，一张一张的下载太麻烦…于是决定爬上一爬
目标网站：
分析目标网站，调节到移动模式，进行抓包分析，不难发现所有图片均以json字符串从服务端返回，这里怎么分析就不多介绍

在这里插入图片描述
分析单个request url:
反正就是很长的一串一大堆参数反正不知道是干嘛的鼠标一直下滑发现出现多个类似的请求url

比较多个 request url:

这里复制出来一部分：

Request URL:
https://image.baidu.com/search/acjson?tn=resultjson_com&ipn=rj&ct=201326592&is=&fp=result&queryWord=%E5%BC%A0%E5%AD%90%E6%9E%AB%E5%9B%BE%E7%89%87&cl=2&lm=-1&ie=utf-8&oe=utf-8&adpicid=&st=&z=&ic=&hd=&latest=&copyright=&word=%E5%BC%A0%E5%AD%90%E6%9E%AB%E5%9B%BE%E7%89%87&s=&se=&tab=&width=&height=&face=&istype=&qc=&nc=&fr=&expermode=&force=&cg=star&pn=210&rn=30&gsm=d2&1599125756815=
Request URL:
https://image.baidu.com/search/acjson?tn=resultjson_com&ipn=rj&ct=201326592&is=&fp=result&queryWord=%E5%BC%A0%E5%AD%90%E6%9E%AB%E5%9B%BE%E7%89%87&cl=2&lm=-1&ie=utf-8&oe=utf-8&adpicid=&st=&z=&ic=&hd=&latest=&copyright=&word=%E5%