调用resnet50权重_融合算法九---ResNet

本文介绍了ResNet50在网络图像融合中的应用,通过使用预训练的ResNet-50提取深度特征,结合ZCA标准化和softmax权重计算实现图像融合。与传统方法和简单神经网络结构相比,ResNet50能更好地利用深层信息,提高了融合效果。实验结果显示该方法在某些性能指标上表现出优越性,但实际应用中需借助GPU加速计算。
摘要由CSDN通过智能技术生成

一.简介

ResNet是residual network(残差网络)的缩写,论文《Infrared and Visible Image Fusion with ResNet and zero-phase component analysis》。https://github.com/hli1221/imagefusion_resnet50​github.com

论文中,作者探讨了传统的图像融合的方法,基于MSD(multi-scale decompsition)方法的,基于SR(spatial representation)方法的,包括近几年神经网络的发展,借助于神经网络的(DLF,DeepFuse, DenseFuse)等,作者提到(DeepFuse,DenseFuse)网络结构过于简单,隐藏在深层的信息没用被用到,所以作者提出了本文的方法。hli1221/imagefusion_resnet50 论文中,作者探讨了传统的图像融合的方法,基于MSD(multi-scale decompsition)方法的,基于SR(spatial representation)方法的,包括近几年神经网络的发展,借助于神经网络的(DLF,DeepFuse, DenseFuse)等,作者提到(DeepFuse,DenseFuse)网络结构过于简单,隐藏在深层的信息没用被用到,所以作者提出了本文的方法。

作者的方法主要分为三个步骤:1)使用ResNet-50提取原始图像的深度特征;2)使用ZCA来标准化深度特征,并生成初始权重,然后使用softmax操作结合初始化权重得到最终的权重;3)使用加权平均的策略对原始图像进行融合。算法结构图

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值