EDVR
ØContribution
(1)为了处理大运动,设计了一个金字塔、级联和可变形(PCD)对齐模块,在该模块中,使用可变形卷积以从粗到细的方式在特征级进行帧对齐。
(2) 提出了一个时间和空间注意力(TSA)融合模块,在该模块中,注意力在时间和空间上都被应用,以增强后续恢复的重要特征。
[1] X. Wang, K. C. K. Chan, K. Yu, C. Dong and C. C. Loy, "EDVR: Video Restoration With Enhanced Deformable Convolutional Networks," 2019 IEEE/CVF Conference on Computer Vision and Pattern Recognition Workshops (CVPRW), 2019, pp. 1954-1963, doi: 10.1109/CVPRW.2019.00247.
ØMethod
PCD
TSA
ØResults
FASTDVD
ØContribution
(1)使用encoder-decoder结构的U-Net,其本身具有在感受也范围内对齐的功能,因此,在FastDVDNet中采用了这种做法,也就提高了性能。
(2) FastDVDNet采用了two-stage结构,连续5帧图像首先分为三组右Block 1提取特征,进而,三个共享参数的Block 1的输出作为Block 2的输出进一步地提取特征、去噪。
[1] M. Tassano, J. Delon and T. Veit, "FastDVDnet: Towards Real-Time Deep Video Denoising Without Flow Estimation," 2020 IEEE/CVF Conference on Computer Vision and Pattern Recognition (CVPR), 2020, pp. 1351-1360, doi: 10.1109/CVPR42600.2020.00143.
ØMethod
ØResults