BasicVSR 视频超分
-
主要思想
-
分析了局部传播,全局单向传播与全局双向传播对与视频超分的影响。,发现当输入为局部传播来进行超分效果明显低于全局传播。而且,局部传播的距离越长,性能越接近全局传播。
-
双向传播双向传播要优于单项传播,帧数的增加,会明显增强信息的聚合,使视频信息可以有效利用
-
特征对齐使用了更好的光流信息,光流网络为Spynet,不使用EDVR提出的dcn网络进行对齐。
-
输入reds数据为15帧一个序列,同时输出15帧的超分图像与loss,测试为输入全部帧,同时计算,直接输出所有帧的超分图像。
-
在basicVSR的基础上又提出了两个组件结构,Information-refill和coupled propagation,新的模型叫IconVSR,性能更佳优于basicVSR
-
代码在mmeditting中集成,
-