Python网络爬虫笔记:下载、分析京东P20销售数据

364 篇文章 14 订阅
362 篇文章 18 订阅

Python网络爬虫笔记:下载、分析京东P20销售数据

1、 翻页的时候,谷歌F12的Network页签可以看到下面的请求。(这里的翻页指商品评价中1、2、3页等)

Python网络爬虫笔记:下载、分析京东P20销售数据

从Preview页签可以看出,这个请求是获取评论信息的

Python网络爬虫笔记:下载、分析京东P20销售数据

2、 对比第一页、第二页、第三页…请求URL的区别

可以发现 page=0、page=1,0和1指的应该是页数。

第一页的 request url:没有这个rid=0& 。 第二、三页…的request url:多了这个rid=0&

除了上面这2个地方,其他内容都是一样的。

Python网络爬虫笔记:下载、分析京东P20销售数据

3、 直接在浏览器输入 复制出来的request url,可以看到评论、颜色、版本、内存信息,代码将根据这些信息来写正则表达式进行匹配。

Python网络爬虫笔记:下载、分析京东P20销售数据

Python网络爬虫笔记:下载、分析京东P20销售数据

(二) 实现代码

Python网络爬虫笔记:下载、分析京东P20销售数据

Python网络爬虫笔记:下载、分析京东P20销售数据
如果大家对于学习python有任何问题(学习方法,学习效率,如何就业),可以随时来咨询我,这是我的公众号:python教程入门学习(教程/解答/交流群/学习方法/就业信息)都有分享的。

(三) 数据分析

1、 下载后的数据如下图所示。

Python网络爬虫笔记:下载、分析京东P20销售数据

2、 生成图表。

Python网络爬虫笔记:下载、分析京东P20销售数据

Python网络爬虫笔记:下载、分析京东P20销售数据

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值