json与protobuf的速度之争

最新推荐文章于 2024-08-01 19:42:17 发布
最新推荐文章于 2024-08-01 19:42:17 发布
阅读量1.8w 收藏 8
点赞数 4
分类专栏： unity unity，android 文章标签： protobuf json 二进制 unity 数据
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_15386973/article/details/78124053
版权
json是这些年慢慢兴起的轻量级数据交换格式。比起老大哥XML。因其更快的解析速度和更小的体积，可谓是用过的都说好。一般情况下json足够满足你的大多数需求，但是在计算机领域，没有最快，只有更快。
当你的传输数据大到一定程度的时候，json的速度也不能满足你需求的时候，你就需要更快的protobuf。
protocolbuffer(以下简称PB)是google 的一种数据交换的格式，它独立于语言， 独立于平台。(百度百科)。
因为其使用二进制存储，所以会比json更快。但是缺点也是显而易见，二进制存储易读性很差。
我曾遇到要解析40M json的需求。在PC端，使用litjson需要解析10秒钟。但是将相同的内容通过protobuf再导出成bytes。只要17M。缩小了2.5倍左右。但是读取速度只要0.8秒，还包括了数据解析后的处理。
0.1秒和0.008秒可能给人差别不大，但是10秒和0.8秒的差别真的是天壤地别。

如果需要传输的数据量比较大时，protobuf是你的不二选择。

如何使用呢？

我们在unity中只需要使用 protobuf-net 这个dll就行了，下面是其在GitHub上的链接。如何使用他链接内已经非常的清楚了，我在这不重复说了。
其中的坑：
1.
将类导出成protobuf或者是从protobuf导入到类时，基类的属性是无法导入的。所以说使用protobuf的模型类最好还是不要相互继承。这点需要注意。
2.unity在pc端读取2进制文件的文件是没有要求的。.bat.bin都可以用C# 的IO类来读取。但是在安卓端因为没法使用IO。如果通过resourecs.load来读取的话，2进制文件的后缀需要是.bytes。


小辣椒酱
关注
专栏目录
【保姆级】Protobuf详解及入门指南
aqin1012的博客
03-11 2万+
Protobuf（Protocol Buffers）协议😉 Protobuf 是一种由 Google 开发的二进制序列化格式和相关的技术，它用于高效地序列化和反序列化结构化数据，通常用于网络通信、数据存储等场景。
protogen:从json到protobuf的生成器
05-22
JSON的Protobuf生成器 不要指望这件事能创造奇迹。 她不知道枚举是什么，默认值是什么。 如果遇到null值，则该字段被视为可选字段，如果未选中“严格模式”复选框（如果选中），则将出现错误。 它只需要占用您的...
protobuf简介
忘忧.
07-16 4866
编写 .proto ⽂件，⽬的是为了定义结构对象（message）及属性内容。使⽤ protoc 编译器编译 .proto ⽂件，⽣成⼀系列接⼝代码，存放在新⽣成头⽂件和源⽂件中。依赖⽣成的接⼝，将编译⽣成的头⽂件包含进我们的代码中，实现对 .proto ⽂件中定义的字段进行设置和获取，和对 message 对象进行序列化和反序列化。
protobuf 详解
Gefangenes的博客
06-21 3万+
Protobuf是Protocol Buffers的简称，它是Google公司开发的一种数据描述语言，是一种轻便高效的结构化数据存储格式，可以用于结构化数据串行化，或者说序列化。它很适合做数据存储或 RPC 数据交换格式。可用于通讯协议、数据存储等领域的语言无关、平台无关、可扩展的序列化结构数据格式。目前提供了 C++、Java、Python 三种语言的 API。protobuf是类似与json一样的数据描述语言（数据格式）protobuf非常适合于RPC数据交换格式protobuf本身并不是和。
【ProtoBuf】ProtoBuf介绍和快速上手
最新发布
qq_55119554的博客
08-01 1122
ProtoBuf的认识和快速上手。
一文读懂——Protobuf
热门推荐
xiaohu的博客
06-14 3万+
protobuf
protobuf为什么这么快
qq_31476455的博客
09-20 476
协议数据格式十分紧凑，采用 tag|leg|value 来定界一个字段，且以这种方式紧密排列，使用varint这种数据结构根据实际字节占用情况灵活分配内存进一步减小传输开销。使用zigzag算法来对负数进行进一步的压缩，最终我们可以使用2个字节来表示-1。用protobuf序列化后的大小是json的10分之一，是xml格式的20分之一，但是性能却是它们的5~100倍。
protobuf介绍和语法
weixin_57023347的博客
09-28 1万+
Protobuf即Protocol Buffers，是Google公司开发的一种跨语言和平台的序列化数据结构的方式，是一个灵活的、高效的用于序列化数据的协议。与XML和JSON格式相比，protobuf更小、更快、更便捷。protobuf是跨语言的，并且自带一个编译器(protoc)，只需要用protoc进行编译，就可以编译成Java、Python、C++、C#、Go等多种语言代码，然后可以直接使用，不需要再写其它代码，自带有解析的代码。
protobuf与json转换小结
10-19
总之，protobuf与JSON之间的转换是通过特定的库和工具实现的，例如Google的`protobuf-java-format`，它解决了protobuf对象的非标准类型与JSON要求的字符串键之间的不兼容性。在实际项目中，正确地进行这种转换对于...
json2pb:JSON到Protobuf转换器的C ++实现
03-25
而Protobuf则是Google开发的一种高效、紧凑且跨语言的数据序列化协议，它提供了比JSON更小的序列化数据大小，以及更快的序列化和反序列化速度。 标题"json2pb: JSON到Protobuf转换器的C++实现"指出，这是一个C++...
实现protobuf与json的互转
07-04
标题中的“实现protobuf与json的互转”是指在软件开发中，如何将使用Protocol Buffers（protobuf）编写的结构体数据转换成JSON格式，反之亦然。Protocol Buffers是Google推出的一种数据序列化协议，而JSON...
实现protobuf和json互相转换python3源码
02-21
与XML和JSON相比，protobuf具有更高的压缩效率和传输速度，同时占用更少的内存。 本主题关注的是在Python3环境中如何实现protobuf和JSON之间的互相转换。首先，我们需要安装`protobuf`库，可以通过pip进行安装： `...
protobuf使用详解
Charge8的博客
10-26 8246
protobuf使用详解
ProtoBuf介绍与使用
冯同学的博客
06-26 6077
ProtoBuf介绍与使用
Protobuf 为啥比 JSON、XML 牛？
SharingOfficer的博客
11-30 1806
今天，我带大家更深层次的认识认识 Protobuf，如果你对 Protobuf 的用法还不熟悉，直接前往： developers.google.com/protocol-bu…。 当对 Protobuf 有了基本的认识后，就会明白了 Protobuf 序列化的数据会比 JSON、XML 传输效率更高。 那为啥会高呢？本篇就带着这个问题一探究竟。 看表面 对于 JSON、XML，为了便于数据传输时的可阅读性，会保留数据的结构化信息，举个 JSON 例子，如下： { "name": "laomi
理解grpc协议（json与protobuf的优劣）
Dontla的博客
02-18 1891
好了，到这里请求映射的问题也分析完了。让我们回到最开始的问题。如果 gRPC 好，它好在哪里？为了这些好，它又牺牲了哪些方面？我们的业务面临什么问题？gRPC 的优点能否为我所用？gRPC 的缺点会不会给我们带来不便？这些问题我在很久之前的一篇文章中有过全面的分析，有兴趣的同学可以移步阅读。参考文章：理解 gRPC 协议。
Protobuf 简介
Angellyouran的专栏
11-26 2744
protobuf 简介
protobuf 为什么快
qq_34873801的博客
06-20 1345
在分布式应用或者微服务架构中，各个服务之间通常使用json或者xml结构数据进行通信，通常情况下，是没什么问题的，但是在高性能和大数据通信的系统当中，如果有办法可以压缩数据量，提高传输效率，显然会给用户带来更快更流畅的体验。 google公司就通过使用一种新的数据交换格式办到了这点，新的数据交换的格式叫做protobuf。 protobuf有多屌呢，可以看一下下面的官方测试报告： 解包耗时 数据包压缩后大小 可以看到，一条消息数据，用protobuf序列化后的大小是json的10分之一..
【Protobuf速成指南】什么是Protobuf？
罅隙的博客
06-04 2464
什么事序列化反序列化？什么是Protobuf？Protobuf的编程特点
c++ json转protobuf
08-12
你可以使用第三方库，如protobuf-json-util来实现C++中JSON转Protobuf的功能。个库提供了一些方便的函数和接口，可以帮助你在Protobuf和JSON之间进行转换。 首先，你需要在你的C++项目中引入protobuf-json-util库。你可以在GitHub上找到该库的源代码并进行下载和安装。 然后，你需要定义你的Protobuf消息和相应的JSON格式。在Protobuf中，你可以使用.proto文件定义消息结构，在JSON中，你可以使用类似的结构来表示相同的数据。 接下来，你可以使用protobuf-json-util库提供的函数来实现JSON到Protobuf的转换。你可以使用`ParseFromJsonString()`函数将JSON字符串解析为Protobuf消息对象，使用`SerializeToJsonString()`函数将Protobuf消息对象序列化为JSON字符串。 下面是一个简单的示例代码： ```cpp #include <iostream> #include <string> #include <protobuf-json-util/json_util.h> #include "your_protobuf_message.pb.h" int main() { // 定义一个Protobuf消息对象 YourProtobufMessage message; // 从JSON字符串解析Protobuf消息对象 std::string json = R"( { "field1": 123, "field2": "hello", "field3": true } )"; json_util::Status status = json_util::ParseFromJsonString(json, &message); if (!status.ok()) { std::cerr << "Failed to parse JSON: " << status.error_message() << std::endl; return 1; } // 将Protobuf消息对象序列化为JSON字符串 std::string serialized_json = json_util::SerializeToJsonString(message); std::cout << "Serialized JSON: " << serialized_json << std::endl; return 0; } ``` 请确保按照protobuf-json-util库的文档进行正确的安装和配置，并根据你的实际需求修改示例代码中的消息类型和字段名。
评论 4
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值