初学Python的我就爬取英雄联盟的皮肤，表弟表示都馋哭了

Python程序员小泉

已于 2024-01-06 21:57:08 修改

阅读量608

点赞数 7

分类专栏： python python作用 Python爬虫文章标签： python 开发语言后端

于 2022-02-07 15:38:30 首次发布

本文链接：https://blog.csdn.net/m0_59162248/article/details/122809686

版权

python 同时被 3 个专栏收录

753 篇文章 64 订阅

订阅专栏

Python爬虫

56 篇文章 4 订阅

订阅专栏

python作用

9 篇文章 1 订阅

订阅专栏

本文详细介绍了如何使用Python爬虫技术从《英雄联盟》官网获取英雄及皮肤图片。首先，通过分析网页源代码找到隐藏在JS文件中的英雄名字和编号，然后解析JS字典获取图片编号。接着，通过观察跳转页面的图片URL规律，构造下载地址。最后，编写代码实现批量下载并保存图片。整个过程包括获取JS字典、生成URL列表、提取图片名称、下载图片和保存。通过这套方法，读者可以掌握基本的网页爬虫技巧。

摘要由CSDN通过智能技术生成

在这里插入图片描述

一、推理原理

1.先去《英雄联盟》官网找到英雄及皮肤图片的网址：

lol.qq.com/data/info-h… 在这里插入图片描述

2.从上面网址可以看到所有英雄都在，按下F12查看源代码，发现英雄及皮肤图片并没有直接给出，而是隐藏在JS文件中。这时候需要点开Network，找到js窗口，刷新网页，就看到一个champion.js的选项，点击可以看到一个字典——里面就包含了所有英雄的名字（英文）以及对应的编号。

在这里插入图片描述

3.但是只有英雄的名字（英文）以及对应的编号并不能找到图片地址，于是回到网页，随便点开一个英雄，跳转页面后发现英雄及皮肤的图片都在，但要下载还需要找到原地址，这是鼠标右击选择“在新标签页中打开”，新的网页才是图片的原地址。

在这里插入图片描述 4.图中红色框就是我们需要的图片地址，经过分析知道：每一个英雄及皮肤的地址只有编号不一样（ossweb-img.qq.com/images/lol/…

二、推理代码

第一步：获取js字典

def path_js(url_js):
    res_js = requests.get(url_js, verify = False).content
    html_js = res_js.decode("gbk")
    pat_js = r'"keys":(.*?),"data"'
    enc = re.compile(pat_js)
    list_js = enc.findall(html_js)
    dict_js = eval(list_js[0])
    return dict_js

第二步：从 js字典中提取到key值生成url列表

def path_url(dict_js):
    pic_list = []
    for key in dict_js:
        for i in range(20):
            xuhao = str(i)
            if len(xuhao) == 1:
                num_houxu = "00" + xuhao
            elif len(xuhao) == 2:
                num_houxu = "0" + xuhao
            numStr = key+num_houxu
            url = r'http://ossweb-img.qq.com/images/lol/web201310/skin/big'+numStr+'.jpg'
            pic_list.append(url)
    print(pic_list)
    return pic_list

第三步：从 js字典中提取到value值生成name列表

def name_pic(dict_js, path):
    list_filePath = []
    for name in dict_js.values():
        for i in range(20):
            file_path = path + name + str(i) + '.jpg'
            list_filePath.append(file_path)
    return list_filePath

在这里插入图片描述

第四步：下载并保存数据

def writing(url_list, list_filePath):
    try:
        for i in range(len(url_list)):
            res = requests.get(url_list[i], verify = False).content
            with open(list_filePath[i], "wb") as f:
                f.write(res)
 
    except Exception as e:
        print("下载图片出错,%s" %(e))
        return False

第五步：执行主程序

if __name__ == '__main__':
    url_js = r'http://lol.qq.com/biz/hero/champion.js'
    path = r'./data/'   #图片存在的文件夹
    dict_js = path_js(url_js)
    url_list = path_url(dict_js)
    list_filePath = name_pic(dict_js, path)
    writing(url_list, list_filePath)

运行后会在控制台打印出每一张图片的网址：在这里插入图片描述