python使用selenium爬英雄联盟/王者荣耀壁纸 附源码

最新推荐文章于 2022-09-20 12:50:49 发布
最新推荐文章于 2022-09-20 12:50:49 发布
阅读量716 收藏 1
点赞数
分类专栏： 壁纸 王者荣耀 英雄联盟 文章标签： python 爬虫
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/zgbhn/article/details/118061843
版权

文章目录

之前看到好多爬王者荣耀和英雄联盟壁纸的，现在有时间，自己也搞个玩玩
记录一下，也帮助一下想要学习的朋友

艾琳-女武神
阿狸-灵魂莲华

LOL壁纸

英雄联盟壁纸我只找到了这个位置的海报，清晰度不是很高，用来做壁纸有点勉强了，如果有好的位置欢迎留言
lol皮肤海报

分析

进入官网资料库之后会看到所有的英雄，打开控制台发现都是li标签组成的，每个li下面都有一个a标签，这就是详情页的链接了

打开详情页，打开控制台，找到海报所在位置
在这里插入图片描述
会发现只有一个img标签，需要点击一下第二个皮肤才会全部加载出来，也是li标签组成的，每个li下面都有一个img标签，这就是图片所在位置了
在这里插入图片描述

写代码

其中用到的包有time、os、requests、selenium，可自行安装

  1. 先创建一个文件夹，用来存放壁纸：
if not os.path.exists('./LOL壁纸'):
    os.mkdir('./LOL壁纸')
  1. 初始化webdriver，我用的是谷歌浏览器，需要下载chromedriver.exe
options = Options()
# 禁止图片和css加载
prefs = {"profile.managed_default_content_settings.images": 2, 'permissions.default.stylesheet': 2}
options.add_experimental_option("prefs", prefs)
wb = webdriver.Chrome('./driver/chromedriver.exe', chrome_options=options)
wb.get('https://lol.qq.com/data/info-heros.shtml')
  1. 获取所有英雄详情页的链接，我用的是执行js方法，用js返回链接的列表：
# 找到并返回链接
js = """
    let hrefs=[];
    let a = $('#jSearchHeroDiv').find('a');
    for(var i=0;i<a.length;i++){
        hrefs.push(a[i].href)
    }
    return hrefs;
"""
# 调用js方法，同时执行javascript脚本， hrefs接收返回的列表
hrefs = wb.execute_script(js)
  1. 进入详情页，找到图片地址
# 这里使用 range 是为了后面方便计数
for i in range(len(hrefs)):
    wb.get(hrefs[i])
    # 等待全部加载完成
    time.sleep(.5)
    
    # 获取英雄名字,我也不会玩这个游戏，不知道怎么区分这两个名字，，，
    hero_name = wb.find_element_by_css_selector('#DATAtitle').text	# 安妮
    # hero_name = wb.find_element_by_css_selector('#DATAname').text	# 黑暗之女
    # 创建英雄文件夹
    if not os.path.exists('./LOL壁纸'+hero_name):
        os.mkdir('./LOL壁纸/'+hero_name)
    # 点击第二个皮肤加载全部
    wb.find_element_by_css_selector('#skinNAV > li:nth-child(2) > a').click()
    time.sleep(.2)

	# 同样使用js进行查找，但是返回的每组数据包含链接和皮肤名称
    js = """
        let imgs = [];
        let img = $('#skinBG').find('img');
        for(var i=0;i<img.length;i++){
            imgs.push({
                href: img[i].src,
                name: img[i].alt
            })
        }
        return imgs;
    """
    # 调用js方法，同时执行javascript脚本imgs接收列表
    imgs = wb.execute_script(js)
  1. 最后就是下载了,使用for循环单个下载
	headers = {
	    "Referer": "https://lol.qq.com/",
	    'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/91.0.4472.106 Safari/537.36'
	}
    for i in range(len(imgs)):
        name = imgs[i]['name']
        # 有个皮肤名称中含有 / 符号，不可作为文件名，需要替换掉，不然会报错
        name.replace('\\', '-').replace('/', '-')
        r = requests.get(imgs[i]['href'], headers=headers)
        with open(f'./LOL壁纸/{hero_name}/{name}.jpg', 'wb') as f:
            f.write(r.content)
        # 等待0.5s，免得访问太多被墙
        time.sleep(.5)

王者荣耀壁纸

分析

王者荣耀的壁纸就比较好找了，官网就有游戏壁纸的入口，基本上都是2k壁纸

还是一样，先打开控制台，发现方块是一个div，1920x1200的链接（a标签）隐藏的很深，但是每个div的结构是相同的
还有个1920x1440，但是感觉比1920x1200视野小，所以爬1920x1200的
一共有25页壁纸，所有还需要翻页
关于名称，有好几种展示方式，一般都是 英雄名-皮肤名 ，还有 英雄名·皮肤名、没有分隔符和 英雄名—皮肤名，这里‘—’并不是壹，是符号


写代码

其中用到的包有time、os、requests、selenium、re，可自行安装

  1. 先创建一个文件夹，用来存放壁纸：
if not os.path.exists('./王者荣耀壁纸'):
    os.mkdir('./王者荣耀壁纸')
  1. 初始化webdriver，我用的是谷歌浏览器，需要下载chromedriver.exe
options = Options()
# 禁止图片和css加载
prefs = {"profile.managed_default_content_settings.images": 2, 'permissions.default.stylesheet': 2}
options.add_experimental_option("prefs", prefs)
wb = webdriver.Chrome('./driver/chromedriver.exe', chrome_options=options)
wb.get('https://pvp.qq.com/web201605/wallpaper.shtml')
  1. 由于直接写明了25页，直接for25次
for k in range(25):
	# 获取此页所有div下的a标签
    hrefs = wb.find_elements_by_xpath('//*[@id="Work_List_Container_267733"]/div/ul/li[6]/a')
    for i in range(len(hrefs)):
    	# 获取图片名称
        full_name = wb.find_elements_by_xpath(f'//*[@id="Work_List_Container_267733"]/div[{i+1}]/h4/a').text
        # 对名称进行分割，分成英雄名和皮肤名
        if re.search('-', full_name):
            first_name = full_name.split('-')[0]
            last_name = full_name.split('-')[1]
        elif re.search('·', full_name):
            first_name = full_name.split('·')[0]
            last_name = full_name.split('·')[1]
        elif re.search('—', full_name):
            first_name = full_name.split('—')[0]
            last_name = full_name.split('—')[1]
        else:
            first_name = last_name = full_name
        # 创建英雄文件夹
        if not os.path.exists('./王者荣耀壁纸/' + first_name) and first_name != last_name:
            os.mkdir('./王者荣耀壁纸/' + first_name)
  1. 下载
	headers = {
	    "Referer": "https://pvp.qq.com/web201605/wallpaper.shtml###",
	    'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/91.0.4472.106 Safari/537.36'
	}
	r = requests.get(hrefs[i].get_attribute('href'), headers=headers)
    file_dir = f'./王者荣耀壁纸/{first_name}/{last_name}.jpg' if first_name != last_name else f'./王者荣耀壁纸/{first_name}.jpg'
    with open(file_dir, 'wb') as f:
        f.write(r.content)
  1. for循环的最后还要点击下一页，加入下一个循环
wb.find_element_by_xpath('//*[@id="Page_Container_267733"]/a[13]').click()

源码

lol

"""

    Code by xian
    email: byxian7024@qq.com

"""
import time
import os
import requests
from selenium import webdriver
from selenium.webdriver.chrome.options import Options

headers = {
    "Referer": "https://lol.qq.com/",
    'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/91.0.4472.106 Safari/537.36'
}


def main():
    options = Options()
    # 禁止图片和css加载
    prefs = {"profile.managed_default_content_settings.images": 2, 'permissions.default.stylesheet': 2}
    options.add_experimental_option("prefs", prefs)

    wb = webdriver.Chrome('./driver/chromedriver.exe', chrome_options=options)
    wb.get('https://lol.qq.com/data/info-heros.shtml')
    js = """
        let hrefs=[];
        let a = $('#jSearchHeroDiv').find('a');
        for(var i=0;i<a.length;i++){
            hrefs.push(a[i].href)
        }
        return hrefs;
    """
    hrefs = wb.execute_script(js)  # 调用js方法，同时执行javascript脚本

    for i in range(len(hrefs)):
        wb.get(hrefs[i])
        time.sleep(1)
        hero_name = wb.find_element_by_css_selector('#DATAtitle').text
        if not os.path.exists('./LOL壁纸' + hero_name):
            os.mkdir('./LOL壁纸/' + hero_name)

        wb.find_element_by_css_selector('#skinNAV > li:nth-child(2) > a').click()
        time.sleep(.2)

        js = """
            let imgs = [];
            let img = $('#skinBG').find('img');
            for(var i=0;i<img.length;i++){
                imgs.push({
                    href: img[i].src,
                    name: img[i].alt
                })
            }
            return imgs;
        """
        imgs = wb.execute_script(js)  # 调用js方法，同时执行javascript脚本
        for j in range(len(imgs)):
            name = imgs[j]['name']
            name.replace('\\', '-').replace('/', '-')
            try:
                r = requests.get(imgs[j]['href'], headers=headers)
                with open(f'./LOL壁纸/{hero_name}/{name}.jpg', 'wb') as f:
                    f.write(r.content)
            except Exception as e:
                print(imgs[j], e)
            print(f"\r[{i + 1}/{len(hrefs)}||{j + 1}/{len(imgs)}]", end="")
            time.sleep(.5)


if __name__ == '__main__':
    if not os.path.exists('./LOL壁纸'):
        os.mkdir('./LOL壁纸')
    main()
    print("========================================\n\n")
    print("壁纸下载完成")
    print("\n\n========================================")

王者荣耀

"""

    Code by xian
    email: byxian7024@qq.com

"""
import re
import time
import os
import requests
from selenium import webdriver
from selenium.webdriver.chrome.options import Options

headers = {
    "Referer": "https://pvp.qq.com/web201605/wallpaper.shtml###",
    'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/91.0.4472.106 Safari/537.36'
}


def main():
    options = Options()
    # 禁止图片和css加载
    prefs = {"profile.managed_default_content_settings.images": 2, 'permissions.default.stylesheet': 2}
    options.add_experimental_option("prefs", prefs)
    wb = webdriver.Chrome('./driver/chromedriver.exe', chrome_options=options)
    wb.get('https://pvp.qq.com/web201605/wallpaper.shtml')
    time.sleep(1)
    for k in range(25):
        hrefs = wb.find_elements_by_xpath('//*[@id="Work_List_Container_267733"]/div/ul/li[6]/a')
        for i in range(len(hrefs)):
            full_name = wb.find_elements_by_xpath(f'//*[@id="Work_List_Container_267733"]/div[{i + 1}]/h4/a').text
            if re.search('-', full_name):
                first_name = full_name.split('-')[0]
                last_name = full_name.split('-')[1]
            elif re.search('·', full_name):
                first_name = full_name.split('·')[0]
                last_name = full_name.split('·')[1]
            elif re.search('—', full_name):
                first_name = full_name.split('—')[0]
                last_name = full_name.split('—')[1]
            else:
                first_name = last_name = full_name
            if not os.path.exists('./王者荣耀壁纸/' + first_name) and first_name != last_name:
                os.mkdir('./王者荣耀壁纸/' + first_name)

            try:
                r = requests.get(hrefs[i].get_attribute('href'), headers=headers)
                file_dir = f'./王者荣耀壁纸/{first_name}/{last_name}.jpg' if first_name != last_name else f'./王者荣耀壁纸/{first_name}.jpg'
                with open(file_dir, 'wb') as f:
                    f.write(r.content)
            except Exception as e:
                print(hrefs[i].get_attribute('href'), first_name, last_name, e)
            print(f"\r[{k + 1}/{25}||{i + 1}/{len(hrefs)}]", end="")
            time.sleep(.5)
        wb.find_element_by_xpath('//*[@id="Page_Container_267733"]/a[13]').click()
        time.sleep(1)


if __name__ == '__main__':
    if not os.path.exists('./王者荣耀壁纸'):
        os.mkdir('./王者荣耀壁纸')
    main()
    print("========================================\n\n")
    print("壁纸下载完成")
    print("\n\n========================================")
ByXian
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
HTML小游戏4 —— 简易版英雄联盟（附完整源码）
前端好玩的小案例、游戏、工具
10-31 6万+
本节教程我会带大家使用 HTML 、CSS和 JS 来制作一个本节示例将会实现如下所示的简易版英雄联盟小游戏。效果：源码也可在文末进行获取。
王者全英雄皮肤壁纸下载-源代码.py
03-26
王者全英雄皮肤壁纸下载-源代码，喜欢王者壁纸的玩家看过来了。
Python | 用Python爬取LOL所有的英雄信息以及英雄皮肤
jonssonyan
07-10 3462
使用Python爬取英雄联盟所有的英雄信息以及英雄皮肤，简单几行代码即可实现爬虫
分享一套仿英雄联盟大型多人联机实时对战游戏源码（包含完整服务器和客户端源码）...
qq_14958051的博客
08-14 1939
源码介绍这是一款类似英雄联盟的 5V5 实时对战游戏，同时支持 Linux 和 Windows 系统部署。我们先来看下这个游戏的内容吧，这是在我机器上编译后运行的效果图：登录界面进入后...
【python】王者荣耀全英雄高清壁纸爬虫共467M（多线程）
XavierJ的博客
12-11 1783
请求URL： https://apps.game.qq.com/cgi-bin/ams/module/ishow/V1.0/query/workList_inc.cgi?activityId=2735&sVerifyCode=ABCD&sDataType=JSON&iListNum=20&totalpage=0&page=0&iOrder=0&SearchKey=sProdName&iSortNumClose=1&jsoncallbac
python爬虫入门案例(爬取lol所有英雄名称及技能)
weixin_44620259的博客
03-05 2671
python爬虫练手任务之获取全部的英雄名称和技能名
python 使用selenium框架爬取王者荣耀官网壁纸
xue_wu_zhi_jing的博客
12-23 290
import selenium from selenium import webdriver import time from threading import Thread import requests import os from selenium.webdriver.support import ui from selenium.webdriver.common.by import By def seek_link(browser,address,page): container = .
Python：王者荣耀壁纸爬取
Small-J
01-15 2059
分析流程 目标网站 http://shp.qpic.cn/ishow/2735010212/1577940093_84828260_16596_sProdImgNo_2.jpg/0 1024768壁纸 http://shp.qpic.cn/ishow/2735010212/1577940125_84828260_1263_sProdImgNo_3.jpg/0 1280720壁纸 http:/...
Python -- 获取王者荣耀皮肤壁纸（二）
zhangdm的博客
12-15 3750
???? Python 学习笔记  文章目录网页分析下载准备设计生产者和消费者实现cache_image_url方法，调用接口获取列表代码实现save_pictrue方法，下载图片资源代码总结完整代码 通过上一篇文章中的方法，我们获取到了游戏内所有人物的名称。接下来我们就要找到显示皮肤壁纸的网页，获取壁纸路径，并将壁纸放到对应文件夹内。 网页分析 我们点击【游戏壁纸】，我们可以看到一个【高清壁纸】栏，这里的内容是分页现实的，所以是动态加载的。 这里面的壁纸只是缩略图，我们点击图片之后会显示
python3+scrapy+selenium爬取英雄联盟英雄资料
luck_lin
03-01 906
继前一篇文章用nodejs+puppeteer+chromium爬取了这个英雄资料后，在本篇同样爬这个页面，思路都差不多，只是用不同语言来实现，可作为参考，个人觉得爬虫还是nodejs比较好用，可能是我python太菜吧 本例环境和所需第三方包：python3、pycharm、selenium2.48.0（用3.0+版本会报错，因为新版本放弃phantomjs了，当然也可以用chrome和fir...
王者农药全英雄全皮肤壁纸下载器+Python源码 .rar
06-11
王者农药全英雄全皮肤壁纸下载器+Python源码，一键下载王者农药所有皮肤，附上源码，仅供学习所用。王者农药全英雄全皮肤壁纸下载器+Python源码
王者荣耀全壁纸下载.zip
07-30
里面有源文件和打包后的文件
python使用selenium爬虫知乎的方法示例
12-16
说起爬虫一般想到的情况是，使用 python 中都通过 requests 库获取网页内容，然后通过 beautifulSoup 进行筛选文档中的标签和内容。但是这样有个问题就是，容易被反扒机制所拦住。 反扒机制有很多种，例如知乎：刚...
python自动化selenium爬虫boss直聘城市招聘数据源码
07-08
本人亲自原创制作python自动化selenium爬虫boss直聘源各个城市招聘数据源码，基于Selenium和谷歌浏览器，旨在帮助爬虫招聘数据。 使用Selenium和谷歌浏览器的方式，使得你的爬虫能够模拟人类的操作行为，实现更高效...
python爬虫 使用selenium 实现中英互译
03-23
1. 翻译器分为exe版和py源文件版 2.压缩包内有使用说明 3.必应翻译没有加密，适合初学selenium的人学习 4.欢迎学习交流
基于selenium的自动化知网文献爬虫python源码.zip
最新发布
05-06
基于selenium的自动化知网文献爬虫python源码.zip基于selenium的自动化知网文献爬虫python源码.zip基于selenium的自动化知网文献爬虫python源码.zip基于selenium的自动化知网文献爬虫python源码.zip基于selenium的...
python之selenium爬虫
02-21
python之selenium爬虫，使用python框架selenium，配合安装的chrome浏览器进行访问百度搜索，进行仿真的填写关键词、点击搜索、查看搜索结果。
Python-爬虫（生产者、消费者模型爬取王者荣耀壁纸）
dodamce的博客
09-20 271
其中页数是通过page传递。可以删除jsoncallback字段，保证通过request.get方法获取到的响应可以直接通过json方法转化为字典。图片链接因为带汉字，需要通过urllib库中parse.unquote方法进行解析后在进行获取。首先壁纸数据不在网站源代码中，其中数据被保存到json中。get请求需要传递参数处理函数。
python爬虫王者荣耀高清皮肤大图背景故事通用爬虫
weixin_30556959的博客
04-06 416
wzry-spider python通用爬虫-通用爬虫爬取静态网页，面向小白 基本上纯python语法切片索引，少用到第三方爬虫网络库 这是一只小巧方便，强大的爬虫，由python编写 主要实现了： 1.爬取高清皮肤大图 2.爬取所有英雄背景故事 所需的库有 requests 只用来发送请求和保存二进制文件 纯python爬虫，利用python索引切片文件读写不依赖第三方网络爬虫库实现硬核...
python使用selenium爬虫代码
05-18
以下是一个基本的使用selenium在Python中进行爬虫的示例代码： ``` from selenium import webdriver # 创建一个浏览器对象 browser = webdriver.Chrome() # 打开网页 browser.get('https://www.example.com') # 获取页面标题 title = browser.title print(title) # 关闭浏览器 browser.quit() ``` 在这个示例中，我们首先导入了selenium中的webdriver模块，然后创建了一个Chrome浏览器对象。我们使用`get()`方法打开了一个网页，然后使用`title`属性获取了页面标题。最后，我们使用`quit()`方法关闭了浏览器。 当然，这只是一个非常基本的示例。在实际的爬虫应用中，您需要使用更多的selenium功能来模拟用户行为，例如模拟点击和填写表单等。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

ByXian

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值