CVPR 2020 | GAN中的反射/光和阴影

点击上方“机器学习与生成对抗网络”,关注"星标"

获取有趣、好玩的前沿干货!

 戳我,查看GAN的系列专辑~!

下述论文可在http://openaccess.thecvf.com/CVPR2020_search.py搜索下载

1 Single Image Reflection Removal through Cascaded Refinement

  • 本文尝试解决从单个图像中去除反射的问题(通过玻璃表面导致),这是不适定的、具有挑战性的问题,它对照片增强起至关重要。

  • 提出了一种迭代Boost卷积式的LSTM网络(IBCLN),该网络能够进行级联式预测以去除反射。作为一个级联网络,它以彼此提高预测质量的方式来迭代地优化传输层和反射层的估计,并使用LSTM传输级联步骤中的信息。

  • 创建了一个真实图像数据集,以缓解数据不足。综合实验表明,该方法可以有效去除真实和合成图像中的反射

  • 残差重建损失、多尺寸感知损失、像素级别损失、对抗损失

2 Single Image Reflection Removal with Physically-Based Training Images

  • 近来,基于深度学习的单图像反射分离方法已被广泛研究。但大多数以多种方式合成大量训练图像对(即有反射和无反射),偏离了基于物理的方向。

  • 本文基于物理的渲染合成所需的训练图像,并提出相应的网络结构和损失项。

  • 为更好分离,提出模块,回溯网络(BT-net)

3 Reflection Scene Separation From a Single Image

  • 对通过玻璃拍摄的图像,现有方法着眼于将反射分量视为噪声来恢复背景场景。

  • 但玻璃表面反射的场景可能还包含重要信息,需要恢复,特别是对于监控或刑事调查。

  • 本文旨在从混合图像中恢复反射场景,而不是从混合图像中除去反射分量。首先提出一种获取此类GT及其相应输入图像的策略。然后,提出一个两阶段框架来从混合图像获得反射场景。(用shift-invariant损失训练网络

4 ARShadowGAN: Shadow Generative Adversarial Network for Augmented Reality in Single Light Scenes

  • 生成与真实环境阴影效果一致的虚拟对象阴影很重要,在计算机视觉和增强现实应用程序中具有挑战性。

  • 为解决这个问题,提出一种用于阴影生成的端到端生成对抗网络,名为ARShadowGAN,用于single light scenes 中的增强现实。

  • ARShadowGAN充分利用了注意力机制,能直接对虚拟对象阴影与现实环境之间的映射关系进行建模,而无需任何照明和3D几何信息的显式估计。

  • 此外,收集了一个图像集训练和评估提出的ARShadowGAN。

  • 源代码将开源在:https://github.com/ldq9526/ARShadowGAN

5 BEDSR-Net: A Deep Shadow Removal Network from a Single Document Image

  • 消除文档图像中的阴影可增强文档视觉质量和可读性。现有大多数用于文档图像阴影去除的算法都属于人工式启发式算法,对于具有不同特征的文档通常不具有鲁棒性。

  • 本文提出Background Estimation Document Shadow Removal Network(BEDSR-Net),第一个专门设计用于文档图像阴影去除的深度网络。

  • 为利用文档图像的特定属性,设计背景估计模块以提取文档的全局背景色。在估计背景颜色的过程中,模块还学习有关背景像素和非背景像素的空间分布信息(将此类信息编码为注意力图)。

  • 实验表明在合成图像上训练的模型对于真实照片仍然有效;并提供了文档的大量合成阴影图像以及它们相应的无阴影图像和阴影mask。

更多分享:

CVPR2020 GAN论文整理

拆解组新的GAN:解耦表征MixNMatch

人脸图像GAN,今如何?(附多篇论文下载)

《基于深度学习的表面缺陷检测方法综述》

《零样本图像分类综述: 十年进展》

《基于深度神经网络的少样本学习综述》

附下载 | 《可解释的机器学习》中文版

附下载 |《TensorFlow 2.0 深度学习算法实战》

附下载 |《计算机视觉中的数学方法》分享

  • 2
    点赞
  • 5
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值