protobuf 序列化协议之数据结构

最新推荐文章于 2024-07-16 15:16:09 发布
最新推荐文章于 2024-07-16 15:16:09 发布
阅读量646 收藏 6
点赞数 9
文章标签： java
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/zhouzhiande/article/details/135959527
版权

.

一、数据结构

1、map

/**
             * <pre>
             *     map
             *         ------------------------------------------------------------------------------------------
             *              fieldNumber0+Wiretype     |  entryMessage |    fieldNumber0+Wiretype    | entryMessage
             *         ------------------------------------------------------------------------------------------
             * </pre>
             */

2、list

/**
                 * <pre>
                 *     list
                 *          BYTES、STRING、MESSAGE
                 *               ---------------------------------------------------------------------------------
                 *                    fieldNumber0+Wiretype     |  data0 |    fieldNumber0+Wiretype     | data1 |
                 *               ---------------------------------------------------------------------------------
                 *
                 *          double、float...
                 *              ---------------------------------------------------------------------------------
                 *                   fieldNumber0+Wiretype     |   dataSize    |  data0 | data1 | data2
                 *              ---------------------------------------------------------------------------------
                 * </pre>
                 */

3、DOUBLE

/**
                     * <pre>
                     *     --------------------------------------------------
                     *          fieldNumber+WIRETYPE_FIXED64 | data
                     *     --------------------------------------------------
                     * </pre>
                     */

4、FLOAT

/**
                     * <pre>
                     *     --------------------------------------------------
                     *          fieldNumber+WIRETYPE_FIXED32 | data
                     *     --------------------------------------------------
                     * </pre>
                     */

5、INT64

/**
                     * <pre>
                     *     --------------------------------------------------
                     *          fieldNumber+WIRETYPE_VARINT | data
                     *     --------------------------------------------------
                     * </pre>
                     */

6、UINT64

/**
                     * <pre>
                     *     --------------------------------------------------
                     *          fieldNumber+WIRETYPE_VARINT | data
                     *     --------------------------------------------------
                     * </pre>
                     */

7、INT32

/**
                     * <pre>
                     *     --------------------------------------------------
                     *          fieldNumber+WIRETYPE_VARINT | data
                     *     --------------------------------------------------
                     * </pre>
                     */

8、FIXED64

/**
                     * <pre>
                     *     --------------------------------------------------
                     *          fieldNumber+WIRETYPE_FIXED64 | data
                     *     --------------------------------------------------
                     * </pre>
                     */

9、FIXED32

/**
                     * <pre>
                     *     --------------------------------------------------
                     *          fieldNumber+WIRETYPE_FIXED32 | data
                     *     --------------------------------------------------
                     * </pre>
                     */

10、BOOL

/**
                     * <pre>
                     *     --------------------------------------------------
                     *          fieldNumber+WIRETYPE_VARINT | data
                     *     --------------------------------------------------
                     * </pre>
                     */

11、STRING

/**
                     * <pre>
                     *     -----------------------------------------------------------------
                     *          fieldNumber+WIRETYPE_LENGTH_DELIMITED | dataLength | data
                     *     -----------------------------------------------------------------
                     * </pre>
                     */

12、BYTES

/**
                     * <pre>
                     *     ----------------------------------------------------------------------
                     *          fieldNumber+WIRETYPE_LENGTH_DELIMITED | dataSize | data
                     *     ----------------------------------------------------------------------
                     * </pre>
                     */

13、UINT32

/**
                     * <pre>
                     *     ----------------------------------------------
                     *          fieldNumber+WIRETYPE_VARINT | data
                     *     ----------------------------------------------
                     * </pre>
                     */

14、ENUM

/**
                     * <pre>
                     *     ----------------------------------------------
                     *          fieldNumber+WIRETYPE_VARINT | data
                     *     ----------------------------------------------
                     * </pre>
                     */

15、SFIXED32

/**
                     * <pre>
                     *     ----------------------------------------------
                     *          fieldNumber+WIRETYPE_FIXED32 | data
                     *     ----------------------------------------------
                     * </pre>
                     */

16、SFIXED64

/**
                     * <pre>
                     *     ----------------------------------------------
                     *          fieldNumber+WIRETYPE_FIXED64 | data
                     *     ----------------------------------------------
                     * </pre>
                     */

17、SINT32

/**
                     * <pre>
                     *     ----------------------------------------------
                     *          fieldNumber+WIRETYPE_VARINT | data
                     *     ----------------------------------------------
                     * </pre>
                     */

18、SINT64

/**
                     * <pre>
                     *     ----------------------------------------------
                     *          fieldNumber+WIRETYPE_VARINT | data
                     *     ----------------------------------------------
                     * </pre>
                     */

二、ProtoType和WIRETYPE

/**
     * <pre>
     *     ----------------------------------------------------------------------------------------------------------------
     *       ProtoType  |  WIRETYPE_FIXED64 | WIRETYPE_FIXED32 | WIRETYPE_VARINT | WIRETYPE_LENGTH_DELIMITED    | JavaType
     *     -------------|---------------------------------------------------------------------------------------|----------
     *       DOUBLE     |        v          |       -          |        -        |          -                   |   DOUBLE
     *     -------------|---------------------------------------------------------------------------------------|----------
     *       FLOAT      |        -          |       v          |        -        |          -                   |   FLOAT
     *     -------------|---------------------------------------------------------------------------------------|----------
     *       INT64      |        -          |       -          |        v        |          -                   |   LONG
     *     -------------|---------------------------------------------------------------------------------------|----------
     *       UINT64     |        -          |       -          |        v        |          -                   |   LONG
     *     -------------|---------------------------------------------------------------------------------------|----------
     *       INT32      |        -          |       -          |        v        |          -                   |   INT
     *     -------------|---------------------------------------------------------------------------------------|----------
     *       FIXED64    |        v          |       -          |        -        |          -                   |   LONG
     *     -------------|---------------------------------------------------------------------------------------|----------
     *       FIXED32    |        -          |       v          |        -        |          -                   |   INT
     *     -------------|---------------------------------------------------------------------------------------|----------
     *       BOOL       |        -          |       -          |        v        |          -                   |   BOOLEAN
     *     -------------|---------------------------------------------------------------------------------------|----------
     *       STRING     |        -          |       -          |        -        |          v                   |   STRING
     *     -------------|---------------------------------------------------------------------------------------|----------
     *       BYTES      |        -          |       -          |        -        |          v                   |   BYTE_STRING
     *     -------------|---------------------------------------------------------------------------------------|----------
     *       UINT32     |        -          |       -          |        v        |          -                   |   INT
     *     -------------|---------------------------------------------------------------------------------------|----------
     *       ENUM       |        -          |       -          |        v        |          -                   |   ENUM
     *     -------------|---------------------------------------------------------------------------------------|----------
     *       SFIXED32   |        -          |       v          |        -        |          -                   |   INT
     *     -------------|---------------------------------------------------------------------------------------|----------
     *       SFIXED64   |        v          |       -          |        -        |          -                   |   LONG
     *     -------------|---------------------------------------------------------------------------------------|----------
     *       SINT32     |        -          |       -          |        v        |          -                   |   INT
     *     -------------|---------------------------------------------------------------------------------------|----------
     *       SINT64     |        -          |       -          |        v        |          -                   |   LONG
     *     -------------|---------------------------------------------------------------------------------------|---------
     *       MESSAGE    |        -          |       -          |        -        |          v                   |   MESSAGE
     *     -------------|---------------------------------------------------------------------------------------|---------
     * </pre>
     */

.

.

_jan_
关注
  • 9
    点赞
  • 踩
  • 6
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
类似protobuf的自定义数据结构
05-05
NULL 博文链接：https://tqywork.iteye.com/blog/2394855
[转] Protobuf高效结构化数据存储格式
木牛的博客
10-19 976
不过好像只能import当前目录及当前目录的子目录中的proto文件，比如import父目录中的文件时编译会报错（Import "../xxxx.proto" was not found or had errors.），使用绝对路径也不行，尚不清楚原因，官方文档说使用 -I=PATH 或者 --proto_path=PATH 来指定import目录，但实际实验结果表明这两种方式指定的是将要编译的proto文件所在的目录，而不是import的文件所在的目录。//输出到string。//从string解析。
ProtoBuf 协议数据结构定义规则
xzben‘blog
05-14 5981
1、ProtoBuf 协议数据结构定义规则 message 消息结构类型名{   限定修饰符 数据类型 字段名 = 字段编码值 [字段默认值]; } 1.1限定修饰符类型及意义： 1) required 说明字段为必备字段，发送方必须设置该字段，接收方必须识别到该字段，否则会导致编码失败。 2) optional 说明字段为可选字段，可以不设置其值。发送方可以选择性的设置，接收
protobuf数据结构化和数据序列化
seapeak007的博客
01-06 582
google出的protobuf提供了数据结构化和数据序列化，相比于XML，JSON，protobuf更小，利用二进制进行传输，也实现不同类型的转化 XML、JSON、Protobuf 都具有数据结构化和数据序列化的能力 XML、JSON 更注重 数据结构化，关注人类可读性和语义表达能力。Protobuf 更注重 数据序列化，关注效率、空间、速度，人类可读性差，语义表达能力不足 Protobuf 的应用场景更为明确，XML、JSON 的应用场景更为丰富 详细介绍可以参考https://www.jian
Protobuf 详解
Vic_Hao的博客
03-28 3000
简介 Protobuf全称是Google Protocol Buffer，是一种高效轻便的结构化数据存储方式，可用于（数据）通信协议、数据存储等。 也可以理解为结构化数据的序列化方法，可简单类比为XML（这里主要是指在数据通信和数据存储这些应用场景中序列化方面的类比，但个人认为XML作为一种扩展标记语言和Protobuf还是有着本质区别的），其具有以下特点： 语言无关，平台无关 Protobuf...
protobuf序列化和反序列化技术
12-28
谷歌推出的Protocol Buffers（简称protobuf）是一种语言无关、平台无关的数据序列化协议，它能将结构化的数据序列化成字节流，方便在网络中进行高效、可靠的传输，同时也能将这些字节流还原为原来的结构化数据，即反...
Unity 中使用Protobuf进行序列化和反序列化的Demo
01-27
Protocol Buffers（Protobuf）是一种高效、跨平台的数据序列化协议，由Google开发。本Demo将展示如何在Unity中集成并使用Protobuf进行数据的序列化和反序列化操作。 首先，你需要了解什么是序列化和反序列化。序列...
Python调用序列化数据工具Protocol Buffers——protobuf
10-22
Protocol Buffers是Google开发的一种高效的数据序列化协议，它允许开发者将结构化的数据串行化，可用于数据存储、通信协议等方面。Python作为一门广泛使用的编程语言，可以方便地集成protobuf进行数据交换。在本文中...
protobuf序列化工具 v.1.1
06-02
protobuf，全称Protocol Buffers，是由Google开发的一种数据序列化协议。它允许开发者定义数据结构，然后将结构化的数据序列化，可用于数据存储、通信协议等方面。Protocol Buffers的设计目标是提供一种灵活、高效、...
java序列化之protobuf
04-17
Protocol Buffers（protobuf）是Google推出的一种高效、跨平台的数据序列化协议，它可以替代XML、JSON等传统序列化方式，提供更小、更快、更简单的解决方案。 protobuf的工作原理是定义一种结构化的数据格式，即....
protobuf基础概念和认知
u013862108的博客
01-02 549
Protocol Buffers - google的数据交换协议。 Protobuf 官方定义： protocol buffers 是一种语言无关、平台无关、可扩展的序列化结构数据的方法，它可用于（数据）通信协议、数据存储等。 Protocol Buffers 是一种灵活，高效，自动化机制的结构数据序列化方法－可类比 XML，但是比 XML 更小（3 ~ 10倍）、更快（20 ~ 100倍...
数据格式之protobuf
qq_43186092的博客
04-30 428
简介 二进制数据交换格式 基于idl语言自动生成对应的数据结构代码 protobuf开发流程 搭建环境 编写IDL文件（.proto文件） 根据IDL文件生成对应语言的数据结构代码 使用相应的工具包完成序列化和反序列化 环境搭建 安装protoc 下载protoc-3.6.1-osx-x86_64.zip文件并解压 cd protoc-3.6.1-osx-x86_64 cp -r i...
Google开发的一套对数据结构进行序列化的方法第一篇:protobuf概要总结
森明帮大于黑虎帮的博客
06-05 2464
那么使用旧接口读取新的协议时，如果发现没有该字段，他们会认为该字段是不完整的，会拒接接收该消息，或者直接丢弃。的整个想法是，它允许您添加/删除协议定义中的字段，同时仍然完全向前/向后兼容较新/较旧的二进制文件。数组中的元素可以重复出现，元素的顺序与添加的顺序相同。字段，则使用旧定义构建的二进制文件将无法解析使用旧定义序列化的数据，因为旧数据中不存在。*类型和数组类型的值时，需要进行空值判断，以避免访问空指针或越界访问的错误。可以定义嵌套类型，即在消息中定义的字段类型是其他消息或其他消息的列表或。
使用反射处理protobuf数据结构
weixin_30894583的博客
06-08 157
google的protobuf是一种轻便高效的结构化数据存储格式，在通信协议和数据存储等领域中使用比较多。protobuf对于结构中的每个成员，会提供set系列函数和get系列函数。 但是，对于使用来说，需要根据传入的参数考虑需要调用的函数名，在使用这个比较多的情况，还是会让人觉得有些麻烦。而且，对于有些使用，例如之后打算不再使用protobuf，改为直接将数据压入内存段(The raw in-...
ProtoBuf介绍与使用
冯同学的博客
06-26 5986
ProtoBuf介绍与使用
protobuf使用详解
Charge8的博客
10-26 7479
protobuf使用详解
protobuf简介
最新发布
忘忧.
07-16 1156
编写 .proto ⽂件，⽬的是为了定义结构对象（message）及属性内容。使⽤ protoc 编译器编译 .proto ⽂件，⽣成⼀系列接⼝代码，存放在新⽣成头⽂件和源⽂件中。依赖⽣成的接⼝，将编译⽣成的头⽂件包含进我们的代码中，实现对 .proto ⽂件中定义的字段进行设置和获取，和对 message 对象进行序列化和反序列化。
Protobuf原理
Wite_Chen
04-25 5025
Protobuf原理
Window+Protobuf使用说明
Fxxk CPP
03-25 249
介绍 起因 由于项目中要用到二进制存储数据,之前使用的方式是按照字节数依次将数据写入字节流中, 但是这样做起来做文件的协议兼容比较难做,所以我们考虑使用 protobuf 来做格式定义, 便于不同版本的文件兼容, 这边使用用起来十分方便且后续添加参数之后, 版本之间的改动很好处理,多出来的参数或者未找到的参数可以使用默认处理即可,十分方便 常用配置文件介绍 程序的配置文件是一个很常用的手段, 每次...
unity protobuf序列化
01-14
Unity中的protobuf序列化是一种将数据结构转化为字节流的方法，以便在网络传输、存储或在不同平台之间传递数据。它基于Google的protobuf (Protocol Buffers)协议，能够高效地序列化和反序列化复杂的数据结构。 在Unity中使用protobuf序列化需要进行以下几个步骤： 1. 定义消息结构：首先需要在.proto文件中定义要序列化的数据结构。这包括定义消息的字段、枚举、嵌套消息等。可以指定每个字段的类型（整数、浮点数、字符串等）和标签（用于标识字段的唯一性）等信息。 2. 编译.proto文件：使用protobuf编译器将.proto文件编译为相应语言的代码。在Unity中可以使用Protobuf-net等第三方插件来生成C#代码。 3. 序列化数据：在需要序列化数据的地方，将数据按照定义好的消息结构进行赋值，并使用protobuf提供的方法将其序列化为字节流。 4. 反序列化数据：在接收端或需要解析数据的地方，使用protobuf提供的方法将字节流反序列化为消息对象，然后可以通过读取字段的方式获取其中的数据。 使用unity protobuf序列化的好处是： 1. 空间效率高：protobuf采用二进制格式进行序列化，可以将数据压缩为较小的字节流，减少网络传输和存储的空间成本。 2. 速度快：protobuf的序列化和反序列化速度较快，可以更有效地处理大量的数据。 3. 跨平台兼容性好：使用protobuf序列化后的数据可以在不同平台、不同语言之间共享和传输，无需担心兼容性问题。 总之，Unity中的protobuf序列化是一种在网络传输和数据存储中高效、方便的数据序列化方法，可以帮助开发者更好地处理数据结构和跨平台数据传输的问题。
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值