1. 项目简介
本项目利用网络爬虫技术从某汽车门户网站采集汽车数据,并利用 Flask + Echarts 前后端框架,
实现对汽车数据的可视化分析,包括不同品牌汽车的评分、车型级别、车身结构、发动机、变速箱和指导价等维度进行可视化统计分析。
2. 功能组成
基于python的汽车信息爬取与可视化分析系统的功能主要包括:
3. 汽车数据爬虫
利用 python 的 request + beautifulsoup 从某汽车门户平台采集汽车数据。
3.1 获取所有汽车品牌数据
url = ‘https://car.xxxx.com.cn/AsLeftMenu/As_LeftListNew.ashx?typeId=1%20&brandId;=0%20&fctId;=0%20&seriesId;=0’
headers = {
‘accept’: ‘/’,
‘accept-encoding’: ‘gzip, deflate, br’,
‘accept-language’: ‘zh-CN,zh;q=0.9,en;q=0.8’,
‘cookie’: ‘Your cookies’,
‘referer’: ‘https://car.xxxx.com.cn/’,
‘sec-fetch-dest’: ‘empty’,
‘sec-fetch-mode’: ‘cors’,