YOLOv11改进 | Conv篇 | YOLOv11引入DSConv

1.DSConv介绍

1.1  摘要:量化是提高卷积神经网络(CNN)速度和降低内存使用量的一种流行方法。当标记的训练数据可用时,网络权重和激活已成功量化到1位。当标记的训练数据不可用时,例如当量化预训练模型时,情况就不能这么说了,其中当前的方法最多显示在8位量化时没有精度损失。我们引入了DSConv,这是一种灵活的量化卷积运算符,它用成本低得多的整数运算替代了单精度运算,同时保持了内核权重和输出的概率分布。我们在最流行的神经网络架构ResNet,DenseNet,GoogLeNet,AlexNet和VGG-Net上测试了我们的模型作为标准卷积的即插即用替代品,并展示了最先进的结果,精度损失不到1%,无需重新训练,仅使用4位量化。我们还展示了如何使用未标记数据的基于蒸馏的自适应阶段可以进一步改善结果。

官方论文地址:https://arxiv.org/pdf/1901.01928v2

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值