js获取list中的某一行数据_python爬虫爬取英雄联盟所有英雄数据并下载所有英雄皮肤...

爬取英雄联盟所有英雄数据并下载所有英雄皮肤

• • 1.爬取网页

  • 2.解析数据

  • 3.保存数据

  • 4.下载图片

代码部分主要分为四大块
“”"
这是要用到的库。

from bs4 import BeautifulSoup		# 网页解析，获取数据
import re		# 正则表达式，进行文字匹配
import urllib.request
import urllib.error		# 指定URL，获取网络数据
import xlwt		# 进行excel操作
import sqlite3		# 进行SQLite数据库操作
import json		# json类型解码
import requests
import os

1.爬取网页

def ask_url(url):
"""
	访问URL
	:return:data
	"""
# 伪装chrome的请求头
	header = {
    
		"User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/84.0.4147.89 Safari/537.36"
	}
	req = urllib.request.Request(url=url, headers=header)
	html = ""
	try:
		response = urllib.request.urlopen(req)
		html = response.read().decode()
	except urllib.error.URLError as e:
		if hasattr(e, "code"):
			print(e.code)
		if hasattr(e, "reason"):