百度指数爬虫更新版

最新推荐文章于 2024-08-20 23:19:05 发布

半吊子Py全栈工程师

最新推荐文章于 2024-08-20 23:19:05 发布

阅读量9.3k

点赞数 1

分类专栏：爬虫加密反爬虫 js 解密

本文链接：https://blog.csdn.net/qq_26877377/article/details/82887023

版权

博主在2019年3月21日发现百度指数爬虫遇到数据缺失的问题，通过更换数据获取接口解决了该问题。文章提到了百度指数的更新导致的爬虫调整，包括模拟登录、获取关键参数、解析数据等步骤，并分享了部分思路和难点。文中还提及了百度对账号访问次数的限制策略。

摘要由CSDN通过智能技术生成

current time: 2019.3.21 正常

对此我们就只能更换获取数据的接口了，我们更改接口以后，就没有缺失数据的情况了！！！

个人感觉是降低了难度，极大的减少了请求次数。这一次是直接根据参数，在js中生成数字

如果需要获取一段的平均值，只需要请求

http://index.baidu.com/api/SearchApi/index 这个参数就行，平均值直接返回 (这个是搜索指数，另外一个资讯指数 基本上就是一样的方式)

如果需要获取每一天的数值就需要研究js了，一共有3个关键参数

使用uniqid 请求

http://index.baidu.com/Interface/api/ptbk 得到第3个关键参数 as data2

关注

专栏目录