自从上次写了一篇教师节送什么?Python教你挑选礼物,让我对淘宝的其他信息产生了产生了很大的兴趣,所以,利用中秋节假期研究了下怎么爬取淘宝商品评价。
由于淘宝现在的反爬机制不断增强,接口API发生了变化,网上的写的爬取淘宝评价的教程都无法使用,给我实现项目带来了很多不便,但好在经过自己的不断摸索,终于实现了功能。
本文实现难点:
一、分析数据包,找到淘宝评论传输用的网址,分析网址特点;
二、获取谷歌浏览器的控制台cookie;
三、如何从找到的数据包中,从json格式内容中得到想要的数据。
本文实现项目的优点:
一、不用难懂的正则表达式也能爬取信息;
二、可以根据自己的需求爬取某个商品所有的评价信息;
三、代码实现比较简单;
四、本文应该是最新的爬取淘宝商品评价的教程了。
案例