百度指数改版之后的数据获取逻辑
改版前
百度指数在改版之前它的获取逻辑可以说是非常复杂。。。算是比较经典的了。。。看过很多人的文章,人们有用图片截取然后识别,有的是用 比例计算。。。都算是可用的方法,一个偶然的机会,在github上面找到一个百度指数的爬虫项目,方法算是比较新颖,给了我一点启发,selenium还可以这样用,真的是学到了,附上链接,有兴趣的小伙伴可以去研究一下 https://github.com/longxiaofei/spider-BaiduIndex
主要是图片处理,但是在获取图片解析图片上的处理时候经常弄不到数据
改版后
改版后反而改简单了,就获取而言,本人也没有大规模抓取,不知道有没有其他什么坑,有兴趣对小伙伴自行尝试吧,我们只说获取的逻辑办法啊,代码什么的,就要靠你自己了。。fighting !!
首先,改版之后现在没有了图片的形式,直接接口就会返回数据,不过有趣的是
这里的这个日均值是可以直接获取的,但是下面的具体每天的指数数据,确实一堆加密的乱码
这里就是重点了,这个接口同时还会返回一个uniqid,