别再研究抄茅台底了，小伙用爬虫捡漏买奔驰！

最近几年，“二手经济”逐渐火热，二手车市场也在快速扩大。

相同的车型，二手车比新车要实惠许多，比如下图中的奔驰GLC级，二手车能比新车便宜5-20万不等。因此有越来越多的人在购置车辆时将二手车纳入了考量。

但众所周知，二手市场的水也比较深，一不小心就容易缴“智商税”，所以在购买二手车前，对市场有一定的了解是必不可少的。

今天我给大家带来了一个某二手车网站的实战项目，用Python来分析二手车市场行情。

一、明确需求

1、爬取某二手车网站奔驰GLC级轿车的信息（标题、购车年份、里程数、价格）

2、利用年限和行驶里程，分析二手车保价率信息

 

二、爬取数据

在动手爬取数据前，我们先确定要用的工具，也就是库。目前用Python写爬虫主要有以下几个做法：

 

根据需求选好工具后，就可以开始爬取数据了。

首先，爬虫会根据我们的指令下载网页的数据，接着，利用xpath表达式从网页数据中提取出我们需要的内容。也就是每辆二手车的标题、年份、里程数、价格等信息。（记得根据页面的二手车信息数量写一个循环哦！）

三、数据清洗

什么是数据清洗？数据清洗是一个对数据进行重新审查和校验的过程，目的在于删除重复信息、纠正存在的错误，并提供数据一致性。

 

就像我们这个例子，爬取的title里存在空格，副标题里存在“|”，我们需要将不同的数据分割，同时删除年份里的“年”字、里程数后的“万公里”这些字眼。只有纯粹的数据计算机才能计算。

最后，利用Pandas库输出为csv文件。

 

这样的数据是不是赏心悦目多了？

 

四、数据可视化

得到了csv格式的规范数据后，我们就可以通过直观的方式对数据进行分析，从中发现数据的趋势、特征。

如图，左图的点阵图可以很明显地看到，购买年份越早的车，价格会聚集在更低的区间；而右图我们可以看到，里程数与价格呈负相关。

 

五、总结流程

我们学习Python，尤其是学习数据分析，离不开大量实战业务的训练，这里给大家提供一个免费的实战训练的途径：网易云课堂的《3天数据分析实战集训营》

如果你想自己动手做这个项目，或者尝试其他实战项目（电商直播、可视化动态地图和Python量化）都可以领取这3节免费直播课，可以帮助大家快速掌握数据思维，体验真实的数据分析项目。现在报名课程后添加小助手，还可以领取4G网易内部资料包。

免费领取资料和大厂直播课

大家按照以下步骤，获取我特意挑选出来的书籍、视频。

1、扫二维码免费报名课程（限时300个名额）

2、报名成功后添加小助手即可免费领取资料

(扫码了解课程详情）

网易直播课内容详情

3月23日  20:00&数据可视化入门：

60分钟，用Tableau快速实现酷炫可视化效果

流程解析：5个关键步骤，掌握核心方法

过程处理：2个关键工具，提升工作效率

实战项目：二手车网站数据爬取+可视化

3月24日 20:00&数据可视化进阶：

4个案例，用Python实现【交互式可视化报表】

入门级图表：用Python快速实现

进阶交互图：股票价格走势

动态趋势图：电商直播分析

地图效果图：销售数据汇总

3月25日 20:00&量化交易入门和进阶:

利用Python，快速选择优质股票

场景工具：利用pandas工具分解KDJ指标构成

流程处理: 交易数据爬取，业务场景分析建模和可视化

分析结果：用KDJ指标模型对比特币行情买卖点搜索&交易回溯

实战项目：掌握根据数据指数和分析工具寻找虚拟货币买卖原理

他们每周都会定期分享一些干货供大家学习参考，对学习很有帮助。

（深度学习DeepLearning.ai实验室认证）

（微软/甲骨文/Cloudera等公司颁发的数据分析证书）

4步学会数据可视化，办公效率提高三倍

（更多精彩内容 等你解锁）

免费领取资料和大厂直播课

大家按照以下步骤，获取我特意挑选出来的书籍、视频。

1、扫二维码免费报名课程（限时300个名额）

2、报名成功后添加小助手即可免费领取资料

(扫码了解课程详情）

如果遇到一些环境配置，还有一些错误异常等bug，资料就显得不太够用，这时就需要找到老师，给我们特别讲解。

或者是想快速学习数据可视化领域知识，不妨先找一找直播课看看，了解当下最贴合实际的学习思路，确定自己的方向。

（记得添加小助手领资料喔，说不定你哪天就用上了）