哔哩哔哩单个视频弹幕爬取

最新推荐文章于 2024-01-02 21:07:59 发布

Norni

最新推荐文章于 2024-01-02 21:07:59 发布

阅读量265

点赞数 1

文章标签： python 大数据 javascript json restful

本文链接：https://blog.csdn.net/Norni/article/details/115714649

版权

本文详细介绍了如何通过分析B站（哔哩哔哩）视频页面的URL来获取视频的oid，进而构造请求弹幕数据的API地址。首先从视频URL中提取bvid，然后使用bvid获取cid，cid与oid相同。最后，利用oid请求弹幕列表，完成弹幕数据的抓取。整个过程揭示了网络爬虫在面对数据入口不明显时的解决策略。

摘要由CSDN通过智能技术生成

>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>
因为太过于简单，所有就只写了基本的流程


网页分析
进入一个视频，然后抓包
通过filter过滤带有'list'的地址

弹幕在以下地址中
https://api.bilibili.com/x/v1/dm/list.so?oid=193943133
https://api.bilibili.com/x/v1/dm/list.so?oid=194941323(另一个视频的弹幕地址，为了区别哪些参数变化了)
oid参数在变化，即一个视频对应一个oid

获取oid
https://api.bilibili.com/x/player/pagelist?bvid=BV1T5411x7y3&jsonp=jsonp
该地址返回一个json字符串，
去掉&jsonp=jsonp后返回的数据不变
该