打造最全皮肤,Python采集英雄联盟(LOL)官网数据!

环境:

  • Python3.6.5
  • Windows
  • pycharm

模块:

  • import requests
  • import jsonpath from urllib.request
  • import urlretrieve import os

 

思路:

进入LOL官网的游戏资料-资料库后,可以看到所有的英雄都在里面。

当我们点击英雄头像时,会跳转到皮肤界面。

 

一般人的做法就是,采集到跳转的url,然后再请求该url获取皮肤数据。

思路没错,但是要想一下,如果源代码中没有跳转的url呢?

 

elements中确实有该链接,但是源代码中没有:

 

这个时候,毫无疑问 --抓包吧:

 

很多人做到这里无从下手了,并没有跳转的url,但是你没发现跳转的url只有一个地方放生了变化吗?(自行观察)

就只有后面的数字发生了变化,而我们的banaudio这个标签当中的url末尾是不是也有个1.ogg???

获取到数字1即可自行构造跳转的url。

到了跳转页面后,会发现网页源代码中同样不存在我们想要的图片数据(继续抓包):

 

OK,问题已经得到解决,很简单的一个案例。

效果

想得到更多的技术文章推送可以关注我的个人公众号:

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值