Python爬取王者荣耀手游中的游戏英雄角色

    王者荣耀相信大家都很熟悉的了，我就不多介绍了，临近毕业又是组团开黑的高峰，去年接触了这一款游戏，平时闲暇时间没事喜欢玩两局，不知不觉王者峡谷内已经诞生了众多的英雄角色，也有很多王者荣耀助手之类的软件来提供游戏操作攻略，今天想花一点时间来探索一些峡谷内的英雄们，简单当做练手了。

    下面是具体实现：

#!usr/bin/env python
#encoding:utf-8

import urllib2
import urllib
from urllib import *
import requests
import os
import chardet
import sys 
reload(sys) 
sys.setdefaultencoding('utf-8')

'''
__Author__:沂水寒城
功能：下载王者荣耀英雄和装备图片
'''


def download_wzry_heros(url_path,page_header,hero_path):
    '''
    下载王者荣耀手游中的游戏英雄角色图片
    '''
    content=requests.get(url=url_path,headers=page_header).json()['list']
    if not os.path.exists(hero_path):
        try:
            os.mkdir(hero_path)
        except:
            os.makedirs(hero_path)
    for i in range(len(content)):
        one_hero=content[i]
        print 'DownLoading {0}th hero,name is: {1}'.format(i,one_hero['name'].decode('utf-8').encode('GB2312'))
        urlretrieve(url=one_hero['cover'],filename=hero_path+'/'+one_hero['name']+'.png')

     结果如下：

    

    

    打开本地目录，可以看到结果文件：

    

    出现的问题：

    最开始获取html内容使用的方法是：

    

content=eval(urlopen(url_path).read())['list']

    后来报错host未指定，这里采用人工设置headers的方式，具体设置方式为：

    1.打开Chrome浏览器输入：chrome://version/  回车

     2.复制用户代理里面的内容存储到‘User-Agent’中来创建headers数据字典即可