1)需求分析
url = ‘https://www.aqistudy.cn/historydata/’
2)基本思路
首先使用requests模块获取网页数据;
其次,利用xpath解析数据,获取热门城市和所有城市的名字;
最后,将数据保存到列表中;
ul_list = ‘//div[@class=“all”]/div[@class=“botton”]ul’
li_list = ‘./div[2]/li’
3)程序
(1)导包
import requests
from lxml import etree
(2)使用requests发起响应,获得网页数据
# 使用requests发起响应,获得网页数据
def get_one_page(url):
"""
获取某一页的数据
"""
try:
response = requests.get(url=url