pickle.dump与troch.dump的异同点

本文讨论了pickle与torch.save在保存神经网络模型参数时的异同,指出torch.save更适用于PyTorch模型,而pickle虽支持多种格式但对onnx和trt模型处理有限。作者强调了算法平台对不同模型支持的需求。
摘要由CSDN通过智能技术生成

因为最近将许多的神经网络模型支持到自己的算法平台中,出现了模型的推理的问题,这里记录和总结一下方便自己以后查看。


pickle的使用以及和troch.dump()的异同点

学习前言

由于自己搭建的算法平台所有算法都是使用pickle来保存所有算法的对象和结构,所以在支持各种神经网络模型时,也将所有神经网络参数改为用pickle保存。

一、相同点

torch.save()pickle.dump()都是常用的保存Python对象的方法,它们都可以用来保存神经网络结构的参数。

二、异同点

1、torch.save()函数是PyTorch官方提供的函数,被广泛使用和推荐;它被设计用于保存PyTorch模型和参数,并支持在之后快速加载,但是它不兼容其他的Python序列化库;

2、pickle.dump()函数是Python标准库提供的函数,支持保存和加载任何Python对象,包括神经网络结构的参数;与其他Python序列化库兼容;加载速度偏慢一点;使用较底层的二进制格式来保存数据,不便于读取或显示;

三、pickle对.pt、.onnx、.trt、.pth、.pth.tar、.pkl模型的支持情况

因为自己的算法平台要支持所有的推理部署方式所以测试了大量不同模型的支持情况

测试结果:pickle支持对.pt、pth、pkl模型数据的加载和保存,但是对onnx和trt模型的保存失败,目前onnx模型和trt模型只能和我的整个算法的参数和结构分开保存,在整个算法数据导入后在单独导入模型

  • 6
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 1
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值