某音_signature参数破解及实时弹幕抓取

最新推荐文章于 2024-06-21 16:16:46 发布

qq_41721353

最新推荐文章于 2024-06-21 16:16:46 发布

阅读量5.1k

点赞数

分类专栏：爬虫文章标签： python 爬虫

本文链接：https://blog.csdn.net/qq_41721353/article/details/128053126

版权

爬虫专栏收录该内容

5 篇文章 1 订阅

订阅专栏

某音_signature参数破解及实时弹幕抓取

声明

本文章中所有内容仅供学习交流使用，不用于其他任何目的.

大致思路

了解过的朋友应该都知道直播大多采用wss协议来传输protobuf数据来实现弹幕功能，于是便有了使用python来发送wss获取protobuf数据并解析的想法。说的比较简单，实现过程中遇到很多问题，我把遇到的问题及解决过程记录在下面，方便朋友们遇到问题时可以得到些许帮助。

遇到的坑及解决办法

python发送websocket请求

使用的第三方库 websocket-client

在请求中也是需要cookie的，否则建立不了wss连接
在open函数中发送与心跳相关的数据
此函数是wss建立连接时调用，原网站使用中在此函数中发送了心跳数据，并且有一个定时函数定时发送心跳数据
我发的数据可能有问题，发送了就建立不了连接，不发送能正常连接并返回数据，此处没有深究，遇到问题再回来看，我的代码如下

    def on_open(self, ws):
        def run(*args):
            # popen = pb.Wsspopen()
            # popen.hb = 'hb'
            # proto_data = popen.SerializeToString()
            # ws.send(proto_data)

        _thread.start_new_thread(run, ())

wss请求地址
当然比较很要的是请求地址，完整的请求地址域名来源于一个https api接口（https://live.xxxxx.com/webcast/im/fetch/）返回的protobuf数据
参数imprp, internal_ext, cursor来自于上述接口protobuf反序列化, room_id，referer也很重要，这两个参数可以从接口https://xxx.xxxxx.com/webcast/web/partition/detail/room/中获取，破解了X-Bogus及_signature也就没有难点了
其他参数都是固定的
注意参数中有空格的地方要替换为%20

逆向接口/webcast/im/fetch/获取protobuf数据

这个接口不出意外涉及两个大名鼎鼎的X-Bogus及_signuture参数，聪明的小伙伴们有各自的办法解决这两个参数，我rpc不想用，扣代码补环境也有一个绕不过去的坎（在js发送xhr请求时导出这两个参数，js功底不够强），所以我用的是纯算法还原的办法。过程网上都有，插桩打断点，根据日志分析加密过程，这个过程也是考验耐心和经验。X-Bogus的破解网上已有很详细的文章，我这里简单记录一下_signature的分析过程

_signature 一共分为五部分
第一部分为定值:_02B4Z6wo00001
第二部分为31位字符串，分为六组：iAKJP wAAID CoAjev pRKwV 4gCiB AAOt1
第三部分位4位随机字符串
第四部分为localstorage中tt_scid的值，若没有则使用cookie生成
第五部分为前四部分的加密值
其中第三四部分可省略

那看来最重要的就是第二部分，具体生成逻辑（主要是移位，异或等运算）还是要自己通过日志分析，提示一下涉及的关键点
big_num：固定字符串10000000110000+当前时间戳的相关操作
每组都有一个公共码（通过日志分析），参与字符的生成
第四组的生成：涉及请求参数及user-agent参与运算，再生成公共码

   部分代码
    big_num_num = _0x28420a(0, big_num.toString());
	console.log(big_num_num);
    ua_num = _0x28420a(big_num_num, ua);
    param_num = _0x28420a(big_num_num, sorted_param_str);
    for_5 = ((ua_num % 65521) << 16) ^ (param_num % 65521);

逆向过程中可以控制变量，完全按照日志数据走流程，看最终结果与日志是否一致，再发送请求，可能需要多抓几次日志分析，或者不同的页面分析，保持头脑清醒的时候分析。
请不到数据可以尝试以下方法
1.将参数字符串拼在url上发送请求，而不是params=params
2.使用httpx发送请求，而不是requests（请求到的数据短，返回的应该是提示http协议版本不对的protobuf信息）