gob 的深度拷贝

最新推荐文章于 2023-11-28 07:00:00 发布
最新推荐文章于 2023-11-28 07:00:00 发布
阅读量1.4k 收藏
点赞数
分类专栏： golang
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/u011228889/article/details/80738285
版权
本文探讨了在项目中使用gob encoder和decoder代替protobuf进行RPC协议时遇到的问题。gob为了提高效率，不会拷贝零值，包括指针指向的零值。这在protobuf结构体的深度拷贝中是个坑，因为protobuf中nil指针的序列化行为可能在不同端有所不同。建议使用proto.Clone()进行protobuf的深拷贝。
摘要由CSDN通过智能技术生成

项目中用了protobuf 做 RPC 协议，然后据说 gob 的encoder 和 decoder 比 protobuf 效率更高，于是写了一个用于 protobuf 结构体的深度拷贝库函数

func DeepCopy(dst, src interface{}) error {
    var buf bytes.Buffer
    if err := gob.NewEncoder(&buf).Encode(src); err != nil {
   
        return err
    }
    return gob.NewDecoder(bytes.NewBuffer(buf.Bytes())).Decode(dst)
}

然而实际使用的时候发现有点坑。
gob 为了提高效率，对于 0 值是不拷贝的，不仅仅是整型的零值，还包括指向零值的指针，也不会拷贝。

测试代码如下：

package main

import<
最低0.47元/天 解锁文章
CasterOxfd
关注
专栏目录
Go 几种深度克隆方式
王小明的专栏
12-23 918
Java 深度克隆 /深度克隆，可以克隆任意数据类型 func DeepClone(src interface{}) (interface{}, error) { typ := reflect.TypeOf(src) if typ.Kind() == reflect.Ptr { typ = typ.Elem() dst := reflect.New(typ).Elem() b, _ := json.Marshal(src) if err := json.Unmarshal(b, dst
golang接口类型与反射底层原理深度解析
weixin_44545838的博客
06-18 1735
反射是Go语言中的一种高级特性，它可以在程序运行时动态地获取和修改变量的类型和值，从而实现很多有用的功能，本博客首先介绍接口类型，为介绍反射打基础，然后从反射的三大法则、底层原理和性能三个方面来介绍Go语言的反射。
Java 使用protostuff实现快速的对象深拷贝
amoxu
04-17 1797
首先protostuff是谷歌开源的一个序列化工具，比Java内部提供的序列化方式要快很多倍，然后深拷贝的时候特别是对于一个pojo我还要把它所有的参数都要写一遍？程序猿？码农？当然不会！所以我们考虑一下序列化吧。 事情的起因是对shiro操作的时候，服务层通过获取当前的登录用户信息进行返回 Subject subject = SecurityUtils.getSubjec...
使用Protostuff来进行深拷贝操作
qq_37553238的博客
12-05 1298
在上篇中，说到了 如何解决@cacheable 使用的问题，即 对于后续有set操作的 @cacheable接口做一次深拷贝，但是上篇中我们最后使用的深拷贝的方法是利用java的自带的ByteArrayOutputStream和ByteArrayInputStream来进行深拷贝，但是java自带的这种深拷贝操作性能操作不是特别的好，压测结果如下： 多次稳定后的压测结果如下(本机虚拟机中)： ...
【golang】使用protobuf
04-29 224
背景 需要使用pb存取数据。 golang使用protobuf 可以参考https://github.com/golang/protobuf，根据readme文档进行操作，或者看下面的介绍。 3.1 安装protoc protoc是一个二进制工具，我们需要用它去编译pb文件，并生成go源码文件，以操作pb对象。 从https://github.com/google/...
go深度拷贝gob版
dobe85601的博客
07-19 173
通过gob的序列化和反序列化进行深度拷贝 package main import ( "bytes" "encoding/gob" "fmt" "reflect" ) type ( Player struct { Id int Level int Heroes map[int]*Hero Equips []*Equ...
golang错误link reading body gob: attempt to decode into a non-pointer
touch_ping的专栏
01-15 3111
出错代码：err = client.Call("Math.Add",args,rep) 出错原因：链接采用非指针， 解决方法：改成指针 err = client.Call("Math.Add",&args,&rep)
Go 语言对象深拷贝方式性能分析
01-08
深度拷贝可以通过序列化和反序列化来实现，也可以基于reflect包的反射机制完成。我对于这两种方式实现深拷贝做了性能基准测试。 下面是对比反射（github.com/mohae/deepcopy）与序列化（gob）所用的基准测试脚本 ...
go代码-内存拷贝测试
07-16
如果需要深度拷贝，需要遍历原map，为每个键值对创建新的键值对并添加到新map中。 3. **结构体（struct）的拷贝**：对于值类型的struct，拷贝会产生一个新的struct，其所有字段都是独立的，修改新struct不会影响原...
Go to Learn Go之Gob
最新发布
hope_wisdom的技术博客
11-28 1418
在上一节的内容中，我们介绍了Go的文件操作，包括：读取文件、写入文件、删除文件、目录操作、遍历目录下文件等。在本节中，我们将介绍Go的Gob。Gob是Go语言中的一种序列化二进制格式，用于在Go语言之间进行数据传输和持久化存储，具有高效和紧凑的特点。Gob编码器将Go语言中的数据结构转换为二进制格式，而Gob解码器则将二进制格式的数据解码为Go语言中的数据结构。Gob使用可扩展的编码方案，可以处理任意类型的数据结构，包括：数组、切片、映射、嵌套结构等。
go 学习笔记 之 使用gob 进行序列化和反序列化
weixin_39802680的博客
10-28 908
方法介绍 编码 使用 gob.NewEncoder(io.Writer).Encode(将要编码的值) 解码 使用 gob.NewDecoder(io.Reader).Decode(将要解码成的值) // 进行序列化 func (b *Block) Encoder() [] byte{ var buffer bytes.Buffer //新建编码对象 bytes.Buffer 可以当作 io.Writer encoder := gob.NewEncoder(&buffer) //序列化,将
学习go语言内置的gob编码——编码后的数据长度
maxdaic的专栏
07-12 680
go语言内置了gob这种编码方案，我从来没用过，感觉很好奇，今天试试。 先写一个简单的代码体验一下： type Retangle struct { Length uint8 Width uint8 } func main() { r := Retangle{ 20, 18, } var buffer bytes.Buffer encoder := gob.NewEncoder(&buffer) err := encoder.Encode(&r) .
Go：专属二进制编码方式Gob
李斌的BLOG
01-14 1359
Gob 是 Go 自己的以二进制形式序列化和反序列化程序数据的格式；可以在 encoding 包中找到。这种格式的数据简称为 Gob （即 Go binary 的缩写）。类似于 Python 的 “pickle” 和 Java 的 “Serialization”。 Gob 通常用于远程方法调用（RPCs，参见 15.9 的 rpc 包）参数和结果的传输，以及应用程序和机器之间的数据传输。 它和 JSON 或 XML 有什么不同呢？Gob特定地用于纯 Go 的环境中，例如，两个用 Go 写的服务之间的通信。.
Golang（Go语言）中Protobuf的使用
热门推荐
weixin_42117918的博客
03-30 2万+
什么是protobuf protobuf也叫protocol buffer是google 的一种数据交换的格式，它独立于语言，独立于平台。google 提供了多种语言的实现：java、c#、c++、go 和 python，每一种实现都包含了相应语言的编译器以及库文件。 由于它是一种二进制的格式，比使用 xml 、json进行数据交换快许多。可以把它用于分布式应用之间的数据通信或者异构环境下的数...
go语言gob序列化指针无法寻址报错
文杰的博客
09-11 524
一、错误描述 使用gob序列化时出现报错：gob: unaddressable value of type *big.Float 场景： 序列化一个数据结构中包含了一个map字段，其中value为big.Float这种结构体类型 type SideBlock { ... Varphi map[string]big.Float ... } // 序列化 func (b *SideBlock) Serialization() []byte { var res bytes.Buffer enc
Go语言：几种深度拷贝(deepcopy)方法的性能对比
pengpengzhou的博客
04-29 2万+
Go语言中所有赋值操作都是值传递，如果结构中不含指针，则直接赋值就是深度拷贝；如果结构中含有指针（包括自定义指针，以及切片，map等使用了指针的内置类型），则数据源和拷贝之间对应指针会共同指向同一块内存，这时深度拷贝需要特别处理。目前，有三种方法，一是用gob序列化成字节序列再反序列化生成克隆对象；二是先转换成json字节序列，再解析字节序列生成克隆对象；三是针对具体情况，定制化拷贝。前两种方法虽......
Go语言如何深度拷贝对象
Andes Home 千年的塔 -十年技术，风雨兼程
04-29 1万+
深度复制可以基于reflect包的反射机制完成, 但是全部重头手写的话会很繁琐. 最简单的方式是基于序列化和反序列化来实现对象的深度复制: func deepCopy(dst, src interface{}) error { var buf bytes.Buffer if err := gob.NewEncoder(&buf).Encode(src); err != ni
go语言实现Gob编解码
viney的专栏
09-04 4115
package main import ( "bytes" "encoding/gob" "fmt" ) // -------------------- // Encode // 用gob进行数据编码 // func Encode(data interface{}) ([]byte, error) { buf := bytes.NewBuffer(nil) enc := gob.Ne
gob: wrong type (string) for received field
08-09
总之，要解决"gob: wrong type (string) for received field"错误，需要确认所接收到的字段类型，并根据需要进行类型转换，同时还需要检查定义和期望是否一致，并添加合适的输入验证逻辑，以确保数据的正确类型匹配...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值