python 抓包秒杀_面试题之用python爬取并夕夕不同时段秒杀商品信息

本文介绍了如何使用Python抓取并夕夕秒杀页面的商品信息。通过分析网页动态请求,找到包含商品数据的XHR接口,并利用requests库进行请求。文章提供了完整代码,实现了将商品名、价格、时间等信息保存到CSV文件中。
摘要由CSDN通过智能技术生成

先上效果图吧(因为确实也是刚入门,很多细节没有注意到的,各位尽管提出来)

f36b8d8235da815e95cc8d18d5fe5658.png

ffafa5200d959230894fb59ecd7164e7.png

并夕夕很多时候都在不停的有秒杀商品的活动,对于价格问题,我就没法讨论了,但是人家能吸引到这么多流量,真本事还是有些的。

我只在乎他这些商品的秒杀活动我怎么把他用python爬取下来。

我先提供下url吧:https://mobile.yangkeduo.com/spike.html?__rp_name=spike_v3&_pdd_tc=ffffff&refer_share_uid=5112141669494&refer_share_id=PESOLudc1rQRf0tuIcRLKTfGwbMzRILK&_wv=41729&refer_share_channel=copy_link&_pdd_fs=1&share_uid=5112141669494&_pdd_nc=d4291d&_pdd_sbs=1&_wvx=10

先拿抓包看看,

e496468f8d7b8812d8347528cc8506dd.png

我们知道requests请求的抓取是抓取的浏览器的第一个请求,拿来看看里面有没有我想要的信息。

e63f155f49d168c021bfe98254e96c30.png

哦豁,第一个请求里面并没有我要的东西,那么光只是requests.get(url)是拿不到东西的,那就得找找问题出在哪了。

实际上他的页面请求是动态的,在netw

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值