更快、更灵活的Transformer图像去雾网络

点击蓝字 关注我们

关注并星标

从此不迷路

计算机视觉研究院

ce081978e96258345115ebc489fb8082.gif

dfd38e56976035fa2ccfbee5d025e4cd.gif

公众号ID计算机视觉研究院

学习群扫码在主页获取加入方式

代码获回复“去雾”获取源代码

c6c6fd3286630f889a1e08db9f62c685.png

计算机视觉研究院专栏

Column of Computer Vision Institute

介绍了一种新的多支路线性Transformer网络,称为MB-TaylorFormer,能够有效且高效的进行图像去雾任务。

369b488ff3833717d8ad33e4abded390.gif

01

摘要

df66dffdb69adbc0cd15b4399460f29e.png

4f52ba68aefa0fb22706bb31ed6ae0cc.gif

02

新框架

新框架:

13dc7446bee0ff833164c78f8d215d2c.jpeg

1772924c0c7f3e56056451a9be3753f2.png

Taylor Expanded Multi-head Self-Attention

f16fd2b78d7f2e36a47f863dc2e17363.png

0a4b86a00b55d654665a779330a7fc53.png

23754ff9b121477da4fd7e62fb2bdbdf.gif

03

实验

Main Results

50b82449876e1fc6454724c2060926ba.jpeg

b4d17202c3e472925908b56031d92c36.png

2875065ac4f1a4e646f7bf3e5390ea2a.jpeg

9ae6e2bfb403877bb01c1b4f73b0a8ea.jpeg

上图给出了合成数据集与真实数据上的视觉效果对比,可以看到:MB-TaylorFormer不仅在阴影处更好的恢复了细节,同时也有效的避免了伪影和色偏。

e9a00ee7604c7162d9386af3724717cf.gif

03

Ablation Studies

19e091ed6e973edd9edac2f2e48f8adc.jpeg

d51d8c3fffcba9a2c74975b7978429c5.png

37e125e1822355f3f93ccc808d180870.jpeg

Effectiveness of multi-scale attention refinement module

上表表明MSAR模块的设计能够以一种极轻量化的设计有效提升TaylorFormer的性能

6356e4f0e1469e4a02eab6e39223d7e2.jpeg

Comparison with other linear self-attention modules

上表通过T-MSA和多种不同的线性Transformer的对比,证明了T-MSA在去雾任务上的有效性。

1dde5be916b0c4ca639e288483818e6a.jpeg

23c52ce13174425898405c251a06e9f0.png

实验室介绍

中山大学智能工程学院的前沿视觉实验室(FVL主页:https://fvl2020.github.io/fvl.github.com/)由学院金枝副教授建设并维护,实验室目前聚焦在图像/视频质量增强、视频编解码、3D 重建和无接触人体生命体征监测等领域的研究。旨在优化从视频图像的采集、传输到增强以及服务后端应用的完整周期。我们的目标是开发通用的概念和轻量化的方法。为了应对这些挑战,我们将持之以恒地进行相关的研究,并与其他实验室进行合作,希望利用更多关键技术,解决核心问题。长期欢迎有志之士加入我们!

© THE END 

cab262fcf42189ee22e4022576816015.gif

转载请联系本公众号获得授权

418944dabeb7391f195e0d2c69848976.gif

计算机视觉研究院学习群等你加入!

ABOUT

计算机视觉研究院

计算机视觉研究院主要涉及深度学习领域,主要致力于目标检测、目标跟踪、图像分割、OCR、模型量化、模型部署等研究方向。研究院每日分享最新的论文算法新框架,提供论文一键下载,并分享实战项目。研究院主要着重”技术研究“和“实践落地”。研究院会针对不同领域分享实践过程,让大家真正体会摆脱理论的真实场景,培养爱动手编程爱动脑思考的习惯!

26cc7d08e3ddcde572efeff8930e6518.png

 往期推荐 

🔗

  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

计算机视觉研究院

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值