【论文阅读】【TIP2024】Reflection Intensity Guided Single Image ReflectionRemoval and Transmission Recovery

引言

任务：单幅图像反射去除（SIRR）

论文地址：

Reflection Intensity Guided Single Image Reflection Removal and Transmission Recovery | IEEE Journals & Magazine | IEEE Xplore

代码地址：

前置知识

在玻璃或其他光滑透明物体阻挡视线的场景中，通常会观察到叠加在透射场景上的明显反射伪影导致图像混乱，视觉吸引力下降。具有反射的图像通常具有模糊，伪影，杂乱的场景或由于玻璃的存在而丢失细节的特征。

基于是否引入附加信息，反射去除方法大致可分为单像反射去除（SIRR）和辅助反射去除（ARR）两类。

一、摘要

单幅图像反射去除（SIRR）的目的是消除透明或光滑表面反射引起的不必要干扰，获得清晰透射层的估计。现有的数据驱动方法通常依赖于将观测图像分解为透射层和反射层，忽略了反射图像的物理生成原理，导致结果不理想，特别是在强反射区域。

针对这一问题，本工作从物理角度分析了反射像的成像过程，得出反射层的照度物理量决定反射强度的结论。然后提出了一种两级反射强度引导网络（RINet），用于反射去除和传输恢复。

二、面临的挑战

1)反射分布往往不均匀，使得在分布和强度方面难以定位反射，特别是当反射强度在图像的不同区域变化时。

2)在处理模糊和阻塞效应时，梯度辅助传输恢复方法可能会引入额外的干扰信息。

  我们提出了一种分而治之的两阶段反射强度引导网络（RINet），用于反射去除和传输恢复。根据该策略，SIRR任务可分为反射强度估计子任务和引导传输恢复子任务。这两个子任务紧密相连，相互提供信息。反射强度估计子任务提供了输入图像中反射分布和强度的基本信息，这些信息对引导传