Python爬取唯品会商品数据,钱包准备好了嘛

本文介绍了一个使用Python脚本自动化抓取唯品会商品信息的过程,包括使用`pageOffset`参数分页获取商品ID,然后调用商品数据接口获取详细信息,最后以CSV格式保存数据。作者还分享了个人经历和关于Python学习资源的观点。
摘要由CSDN通过智能技术生成

pageOffset参数的变化每120个数据翻一页嘛,ID都获取了,前面也看到每个商品数据接口对应的是50条数据,经过分析就知道 120个商品划分为是三个 50,50,20 分别传入相对应的商品ID就可以了。

实现代码


  • 获取每页商品ID值

for page in range(0, 1201, 120):

url = ‘https://mapi.vip.com/vips-mobile/rest/shopping/pc/search/product/rank’

headers = {

‘referer’: ‘https://category.vip.com/suggest.php?keyword=%E5%8F%A3%E7%BA%A2&ff=235%7C12%7C1%7C1&page=3’,

‘user-agent’: ‘Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/81.0.4044.138 Safari/537.36’

}

params = {

‘callback’: ‘getMerchandiseIds’,

‘app_name’: ‘shop_pc’,

‘app_version’: ‘4.0’,

‘warehouse’: ‘VIP_NH’,

‘fdc_area_id’: ‘104104101’,

‘client’: ‘pc’,

‘mobile_platform’: ‘1’,

‘province_id’: ‘104104’,

‘api_key’: ‘70f71280d5d547b2a7bb370a529aeea1’,

<
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值