Image Deblurring Aided by Low-Resolution Events [论文解读]

Image Deblurring Aided by Low-Resolution Events [论文解读]

商汤的一个工作，解决低空间分辨率events+高空间分辨率image的deblur问题。

摘要

核心问题：解决rgb图像和events图像空间分辨率不匹配导致的deblur结果质量不佳的问题
拿到的数据：理想情况下不存在对齐问题的高空间分辨率rgb+低空间分辨率events
建立一个新的pipeline：1. 先粗略进行image +events deblur；2. 然后image-blur，image-sharp0，events进SR模型进行超分；3. image-blur，events-SR 进deblur模型得到最终的image-sharp1

如果对于dvs相机生成events的原理还不懂的话，可以参考这篇文章Event-Based Vision: A Survey，看看dvs相机的种类和原理。本文也简单介绍了一下dvs相机的原理，如下式
$$log(I_{xy}(t)+b)-log(I_{xy}$$