JS逆向案例-万方的protobuf逆向解析

已于 2022-02-27 22:42:43 修改
阅读量3.6k 收藏 26
点赞数 11
分类专栏： python爬虫逆向案例中高级 文章标签： python
于 2022-02-26 19:00:23 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_43411585/article/details/123151047
版权
本文介绍了如何对万方使用的protobuf序列化数据进行逆向解析，包括protobuf的特征、解析思路流程及推荐的解决方法。通过Fiddler抓包，保存序列化数据为.bin文件，然后使用Python解析库或手动编译生成pb2包进行反序列化。文中还强调了请求参数和响应处理的注意事项，并推荐了相关文章以帮助解决解析中遇到的问题。
摘要由CSDN通过智能技术生成

目录

一、Protobuf的特征

  • 案例网址

  • ① Protocol buffers是一种语言无关、平台无关、可扩展的序列化结构数据的方法；严格说不算是加密，只能是叫序列化结构数据，让可读变为疑似的乱码

  • ① 请求头里明显有提示，媒体类型是proto，content-type: application/grpc-web+proto
    在这里插入图片描述

  • ② 参数或者响应被序列化：呈现乱码格式0B，无论请求参数还是响应都无法看出是什么
    在这里插入图片描述

了解本专栏 订阅专栏 解锁全文
十一姐
关注
  • 11
    点赞
  • 踩
  • 26
    收藏
    觉得还不错? 一键收藏
  • 9
    评论
专栏目录
订阅专栏
JS逆向-Protobuf逆向解析
十一姐的博客
11-13 8925
目录一、什么是Protobuf二、Protobuf环境配置三、Protobuf实例序列化与反序列化四、逆向解析 Protobuf案例1、python序列化2、python反序列化 一、什么是Protobuf 1、protocol buffers介绍：是一种语言无关、平台无关、可扩展的序列化结构数据的方法。严格说不算是加密，只能是叫序列化结构数据，让可读变为疑似的乱码，那反序列化即让疑似的乱码变为可读 2、protobuf使用流程的前提是有一个.proto文件，对逆向而言就是还原.proto文件，选择
【JS逆向案例】某产业大数据平台进制流参数逆向
m0_70423491的博客
09-20 1400
【JS逆向案例】某产业大数据进制流逆向分析，hook破解无限debugger
【JavaScript 逆向】Protobuf 协议之万方数据平台正逆分析
Yy_Rose的博客
08-27 5444
Protobuf 序列化协议正向与反向解析，万方数据平台检索内容提取
protobuf js逆向笔记
Ig_thehao的博客
09-24 579
首先下载好protoc的编译器 该编译器可以 protoc ./test.proto --python_out=./ 要以./开头 Missing input file.
抓包+逆向app分析protobuf
风中的承诺
06-20 4556
首先明确我们的目标。我们的最终目标是还原proto文件。并用python成功解析数据。 1.抓包分析 拿到一款app，首先抓包 如果协议头是application/x-protobuf，那么charles可以大致解析出来响应的文本。可以看到甚至连序号以及类型。注意这个前面的1，2，3不是charles自动给我们标的序号，而是message里面，定义的字段编号。我换了编号，请求响应如下: 基本上我们根据抓包结果就可以编写proto配置文件了。 但是现在大多数app，一般用了protobuf协议，基本上都是
js逆向实战之某书protobuf反序列化
jerry3747的博客
08-24 1615
qquadProtobuf（Protocol Buffer）是 Google 开发的一套数据存储传输协议，作用就是将数据进行序列化后再传输，Protobuf 编码是二进制的，它不是可读的，也不容易手动修改，因此它增加了分析或修改数据的难度。同时Protobuf 能够把数据压缩得很小，从而提高传输效率。通俗的理解就是Protobuf跟json序列化是类似的，只不过实现的方法不同而已。
JS逆向案例-web某音弹幕protobuf逆向解析
十一姐的博客
02-27 3284
目录一、案例分析二、案例解析 一、案例分析 如图弹幕信息，弹幕信息是protobuf序列化后的数据 响应头也有明显特征：content-type: application/protobuffer 二、案例解析 关于protobuf案例的更详细介绍看这篇文章 这里直接安装pip install blackboxprotobuf，先用fiddler抓包，然后选择响应当中的十六进制字节黑色字体右击存为.bin文件，然后按如下脚本解析 如果是响应请求的话，就按如下脚本解析即可import reque
【JS逆向系列】某方数据获取，proto入门
zjq592767809的博客
03-27 3458
【JS逆向系列】某方数据获取，proto入门 样品网址：aHR0cHM6Ly93d3cud2FuZmFuZ2RhdGEuY29tLmNuL2luZGV4Lmh0bWw= 打开网站后，随便搜索一个关键词，这里以【百度】为例，本次需要分析的是【SearchService.SearchService/search】这个接口 这里可以看到，请求体不再是表单或者json，而是一堆类似乱码的东西，再看看响应体 也是一堆乱码，有的人可能就会想，会不会是有加密呢？当然不排除这个可能。接着再看看请求头，其中有一行是【co
js 字符串读取成流数据_ProtoBuf序列化结构数据的抓取
weixin_39847732的博客
12-21 777
网站在这里：首先还是抓包：比较有意思的是，post了一个不可见字符，这是之前解密js没有遇到的。在headers中看到这个：content-type: application/grpc-web+protoProtoBuf：protocol buffers 是一种语言无关、平台无关、可扩展的序列化结构数据的方法，它可用于（数据）通信协议、数据存储等。 Protocol Buffers 是一种灵活，高...
万方 protobuf 反序列化
bangtanhui的博客
06-01 1262
其大致流程：实例化一个proto格式对象（长得类似c的结构体），将检索式塞到该对象属性中，对其进行序列化为二进制，发送请求，对接收到的数据进行反序列化。这里变量名好像可以自己命名，主要是序号需要保持一致，但为了解析数据方便，这里变量名也尽量保持了和js中的一致，最终得到右边的proto文件。本人是通过python发送请求，根据上面参考文章说的，要将数据反序列化，便需要获取到proto格式，比如有哪些变量和变量类型。但是，万方数据库，确是这样的，看不到请求body都是一些乱码一样的数据，连返回的数据也是。
【Web逆向】Protobuf 逆向解析两种方法
皮埃尔的博客
02-25 4426
严格说不算是加密，只能是叫序列化结构数据，让可读变为疑似的乱码。上面序列化的数据都可以复制保存为解析.bin文件，解析.bin文件显示原始数据有两种方法，都会出现还原失败的情况，这和复制下来的序列化数据有关。然后即可在cmd执行protoc --decode_raw < test.bin，其中test.bin是一个文件名称，即可看到原始数据。用 blackboxprotobuf 模块解析，即可看到原始数据，但是有可能是失败的结果。请求头里明显有提示，媒体类型是 proto，，下载对应版本并解压，
protobuf协议逆向解析
最新发布
随便写写
04-26 1299
编译器, 注意下载对应的系统版本, 下载地址这里: https://github.com/protocolbuffers/protobuf/releases/latest。其实这里就可以还原数据结构了, 只是不知道这些字段的意义;而刚刚的json数据就可以帮忙对比出它原本的字段名, 进而了解字段的大概意义.会生成两个文件, 其中一个里面会有下面这个类, 另一个应该是空的， 不用管。有的实在找不到对应的变量名, 你任意取一个名字也不影响, 你能懂就好。接口举例的, 但是断点那里的接口是。
某方数据平台的逆向分析-------学会逆向protobuf网站（上）
qq_56881388的博客
01-09 1239
学会protobuf的web js逆向，学会基本上能解决目前遇到的protobuf网站
js逆向_知识小结
十一姐的博客
03-22 8793
目录1、开发者工具小技巧2、Fiddler使用小技巧3、python代码小技巧4、js代码知识点
gRPC-Web及其与Istio Envoy的无缝集成
罗小爬的技术宝书
02-10 2421
本文主要介绍gRPC-Web相关背景及其使用，并着重记录了其与Istio Envoy的无缝集成。
C++中函数调用时的三种参数传递方式详解
qq_23923713的博客
11-28 383
原文地址：https://blog.csdn.net/ccblogger/article/details/77752659?utm_medium=distribute.pc_relevant_t0.none-task-blog-BlogCommendFromMachineLearnPai2-1.control&depth_1-utm_source=distribute.pc_relevant_t0.none-task-blog-BlogCommendFromMachineLearnPai2-1.co
vue3 protobufjs 前端解析PB数据
jmszl1991的博客
05-17 3907
protobufjs解析PB数据，protobufjs二进制转json
评论 9
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值