大神牛刀小试,用Python爬取海量头条妹子图!

首先需要安装的Python库:

requests

urllib

直接pip安装就好了

接着我们在网页上打开今日头条,在搜索栏搜索“街拍”

因为这里面的小姐姐多,漂亮

之后,我们选择“network”标签,按F5刷新,就能找到类型“Type”是“xhr”的,这是一个Ajax请求。Ajax的全称是“Asynchronous JavaScript and XML”,即异步的‘JavaScript ’和‘XML’。

原理是:利用JavaScript在保证页面不被刷新、页面链接不改变的情况下与服务器交换数据并更新部分网页的技术。

点击“Type”为“xhr”的Ajax请求的name,再选择“Preview”标签,我们就可以看到下图的数据了,这是浏览器向服务器请求的 json数据,将data展开可以我们就看到了

接下来我们展开‘data’,再点开一个,比如‘0’,找到里面的‘image_list’展开,这四个URL就是网页上的四张缩略图的URL。

看看效果:

好了,不多说了 !直接上代码。

需要的Python资料的可以私信、留言小编,免费领取!

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值