DL workbench上手总结

DL Workbench是OpenVINO提供的Windows平台量化工具,支持多种模型框架如IR、ONNX、MXNet等。本文介绍了使用该工具的操作流程,并强调了Docker设置、数据集要求以及模型转换的注意事项。通过实验,作者发现将预训练的Caffe MobileNet模型转换为int8后,推断速度和延迟显著提升,且精度得到保持或提高。
摘要由CSDN通过智能技术生成

DL workbench是openvino推出的一个win平台上的量化工具。它提供了大量的各个框架的模型,但也支持自己导入模型。它支持的模型框架有IR、ONNX、MXNet、Caffe、TensorFlow,但只支持著名的网络层,其它自定义层要自己手动写。

大概的操作流程见
https://blog.csdn.net/sandmangu/article/details/103581882
讲得比较详细了。

几个要注意的点是,安装好docker desktop后,如果不能很好地访问外网,最好在setting那里改一下国内源。
在这里插入图片描述
我试过163、ustc和官方中国镜像,效果都不好,建议去阿里申请。

另外,DL workbench支持的数据集也比较有限:
在这里插入图片描述
它对数据集也有着特别的要求:
https://docs.openvinotoolkit.org/latest/_docs_Workbench_DG_Dataset_Types.html
比如说ImageNet_val的label文件里只有label,是默认行数与图片数对应,但这里要求要显式地标记图片名。不过这个也不难,写一个简单的程序就可以了。

至于模型,我一开始用了pytorch官方在imagenet上的预训练模型转的onnx模型,结果精度低到爆炸,然后我在网络找了挺久的预训练模型,终于找到一个:

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值