618购物节,准备分析一波购物节大家都喜欢买什么 一、获取数据 1. 分析网页 在编写代码之前,先来分析一波网页。 上面是某东的畅销商品,通过分析,该网页有异步加载(前面10个商品是静态加载,剩下的是动态异步加载),因此我们需要写了个请求去获取数据。 2. 获取静态网页商品链接 商品的销售、评论等数据在商品详情页,这里先获取商品详情页链接 结果如下: 3. 获取动态网页商品链接 通过抓包可以获取到动态加载链接,并获取到商品标题和商品id(这里的商品id可以用于后面拼接商品详情页链接)