Python爬取唯品会商品数据，钱包准备好了嘛!

前言

本文的文字及图片来源于网络,仅供学习、交流使用,不具有任何商业用途,如有问题请及时联系我们以作处理。

PS：如有需要Python学习资料的小伙伴可以加点击下方链接自行获取

python免费学习资料以及群交流解答点击即可加入

开发工具

• python 3.6.5
• pycharm

import requests
import re
import csv
123

目标网页分析

马山就要双十一了，有女朋友的朋友准备好了吗~

之前关于京东、淘宝的商品数据都是爬取了，今天爬取一下唯品会的商品数据，之前就听朋友说起唯品会的商品价格要便宜一些，三个平台的数据都爬取了，可以自行去对比

Python爬取淘宝商品数据

Python爬取京东商品数据

通过开发者工具可以看到，网页并没有返回我们想要的商品数据，所以打算直接复制网页数据进行搜索查找

如上图所示，复制商品名字，在开发者工具里面直接搜索，可以看到相关的数据包，里面包含了商品标题、售价、原价、折扣以及商品的其他数据信息。

既然这个接口里面有想要的数据了，那接下来就是分析URL怎么样才能获取这个URL，因为这个数据包里面只有50条数据，然而唯品会一页是有120条数据的。

想要找到url的变化规律，那么就需要你自己多去看几个数据，同样的方法一个数据接口只要五十条数据，那么就可以选择第51条数据或者后面的数据去搜索，查找相对应的数据接口，通过一系列的对比发现，url中的参数productIds 的变化，参数中就是每个商品ID值了，那问题来了