图像复原
文章平均质量分 94
AIWalker-Happy
Happy专注于底层视觉处理,对基础AI技术保持学习心态
展开
-
CVPR2023 | 提升图像去噪网络的泛化性,港科大&上海AILab提出 MaskedDenoising,已开源!
作者 | 顾津锦首发 | AIWalker链接 | https://mp.weixin.qq.com/s/o4D4mNM3jL6sYuhUC6VgoQ当前深度去噪网络存在泛化能力差的情况,例如,当训练集噪声类型和测试集噪声类型不一致时,模型的性能会大打折扣。作者认为其原因在于网络倾向于过度拟合训练噪声,而没有学习图像自身的内在结构。为了解决这个问题,作者提出了一种遮盖图像训练的策略(masked image training)。原创 2024-03-03 10:02:01 · 644 阅读 · 0 评论 -
超越SwinIR,Mamba入局图像复原,达成新SOTA
最近,选择性结构化状态空间模型(例如 Mamba)在具有线性复杂性的远程依赖关系建模方面表现出了巨大的潜力,但它在低级计算机视觉中仍处于探索之中。在这项工作中,我们引入了一个简单但强大的基准模型,名为 MambaIR,用于图像恢复。具体来说,我们提出残差状态空间块作为核心组件,它采用卷积和通道注意力来增强普通曼巴的能力。通过这种方式,我们的 MambaIR 利用局部补丁重现先验以及通道交互来生成特定于恢复的特征表示。大量实验证明了我们方法的优越性,例如,使用类似的计算成本但具有全局感受野,原创 2024-02-29 07:17:11 · 1696 阅读 · 0 评论 -
图像处理新框架 | 语义与复原指令双引擎,谷歌研究院提出文本驱动图像处理框架TIP
基于文本到图像扩散模型的空前成功,文本引导图像修复的最新进展已经可以生成非常逼真和视觉上合理的结果。 然而,当前的文本到图像修复模型仍有很大的改进潜力,特别是在更好地将修复区域与用户提示对齐以及执行高分辨率修复。在本文中,我们介绍了HD-Painter,这是一种完全无需训练的方法,可以准确地遵循提示并连贯地缩放到高分辨率图像修复。我们的实验表明,HD-Painter在质量和数量上都超过了现有的最先进的方法,实现了令人印象深刻的61.4%对51.9%的生成精度提高。所提出方案由两个阶段组成:如上表所示,我们的原创 2024-02-25 10:27:17 · 735 阅读 · 0 评论 -
MiOIR | 直面 “多合一”图像复原,港理工张磊团队提出MiOIR,融顺序学习与提示学习于一体!
本文首发:尽管单任务图像复原已取得了极大成功,但单模型处理多复原任务仍极具挑战。本文对研究结果表明,采用所提的顺序学习和提示学习策略可以显著提高CNN和Transformer模型在多合一复原任务上的性能。此外,这两种学习策略还能够相互促进,增强模型的鲁棒性。原创 2024-02-25 10:24:38 · 736 阅读 · 0 评论 -
HDRUNet | 深圳先进院董超团队提出带降噪与反量化功能的单帧HDR重建算法
编辑:Happy首发:AIWalkerPaper: https://arxiv.org/pdf/2105.13084.pdf本文是深圳先进技术研究院董超团队在HDR领域的最新力作,取得了NTIRE2021 单帧HDR竞赛第二成绩,指标仅低0.07dB,但推理速度快116倍。针对HDR重建伴随的高光区域细节重建、低光区域噪声抑制以及正常曝光区域的量化损失、噪声抑制问题,HDRUNet提出了(1) 条件网络提供空域可变调制;(2) 加权网络提供正常曝光区域信息保留;(3) Tanh_L1用平衡不同.原创 2021-05-29 12:59:28 · 1541 阅读 · 3 评论 -
HINet | 性能炸裂,旷视科技提出适用于low-level问题的Half Instance Normalization
编辑:Happy首发: AIWalker大家好,我是Happy。一直以来,甚少有normalization技术在low-level得到广泛应用并取得优异性能,就算得到应用其性能也会受限或者造成异常的视觉效果。不过,现在有了!旷视科技的研究员提出了一种Half Instance Normalization技术用于图像复原并在不同的low-level领域取得了SOTA性能,先来看一下其刷新的性能(注:以下数据来自paperswithcode.com,此前最佳性能由MPRNet达成):Image .原创 2021-05-18 12:03:40 · 5060 阅读 · 0 评论 -
NTIRE2021图像去模糊竞赛冠军方案: EDPN
编辑:Happy首发: AIWalker本文是中科大团队用于参加NTIRE2021图像去模糊竞赛的方案EDPN,取得了Track1三指标第一,Track2赛道双指标第一的成绩。EDPN是在EDVR的基础上改进而来,引入了金字塔结构、渐进式思想集成自相似性与跨尺度相似性特征。Abstract学术界的图像去模糊往往采用了最简单的单一假设,而真实场景的模糊往往与其他退化并存,比如压缩、下采样。为解决这种问题,本文提出了一种适用于多退化的模糊图像复原:EDPN(Enhanced Deep Pyr.原创 2021-05-15 11:35:00 · 886 阅读 · 1 评论