DeblurGANv2的改进策略2-更换不同的激活函数

本文探讨了在DeblurGANv2中替换常用激活函数(LeakyReLU、sigmoid、swish)对训练过程和结果的影响,发现PSNR和SSIM指标差异不大,LeakyReLU保持原用,sigmoid稍有改善但效果不显著。优化方向可能着重于训练时间效率。
摘要由CSDN通过智能技术生成

激活函数是网络训练中的重要组成部分
目前常用的激活函数有sigmoid,swish和Leakyrelu等,其中Leakrelu为GAN网络训练中比较常用的激活函数,也是DeblurGANv2源代码使用的激活函数,以下将尝试更改不同的激活函数,研究对训练过程和训练结果的影响,对DeblurGANv2进行改进。
修改步骤:
修改models文件夹下的网络搭建部分networks.py文件,更改激活函数
在这里插入图片描述
如上图所示,总共有8个部分需要修改
使用Leakyrelu激活函数的训练结果(源代码使用的是这个激活函数)
在这里插入图片描述
使用sigmoid激活函数的训练结果
在这里插入图片描述
使用swish激活函数的训练结果
在这里插入图片描述
更换不同的激活函数,对性能指标的影响
PSNR指标对比
在这里插入图片描述

PSNR指标对比平滑操作(分析-信号处理-平滑-窗口点数30)
在这里插入图片描述
SSIM指标对比
在这里插入图片描述

SSIM指标对比平滑操作
在这里插入图片描述
总结:通过对比,3个激活函数的PSNR和SSIM指标差别不大,源码中使用的是Leakyrelu,改为sigmoid好一点,但是效果并不是很明显,可以从训练的时间上进一步考虑,训练时间短的激活函数具有一定的优势!
该方向的改进策略:待补充…

  • 3
    点赞
  • 5
    收藏
    觉得还不错? 一键收藏
  • 3
    评论
评论 3
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值