工具:谷歌浏览器,vscode ,
主要python库:requests,execjs,selenium,re
1.前期分析
网页页面:
页面分析:
1.用谷歌浏览器查看网页源代码,并未发现图片的相关信息,判断使用Ajax
2.要谷歌自带检查工具,查看网页Ajax请求,果不期然发现目标
Ajax请求的响应内容分析:
查看上图中data 里的数据(0,1,2,3....),发现页面的图片信息都包含其中,如下图
点开页面上的图片,可以发现是一组图片,每张图片的URL
https://www.toutiao.com/a6583645958939083278/#p 即(https://www.toutiao.com/a6583645958939083278/#p=1)