还记得那个引来巨大争议,最后把LeCun逼退推特的低分辨率图像还原算法PULSE吗?
PULSE是针对低分辨率图像进行还原的,而就在PULSE问世不久后,一个针对模糊视频进行实时高分辨率渲染的算法问世了。
前几天,Facebook公布了一项在即将举行的SIGGRAPH 2020会议上展示的新论文,提出了一种新的神经网络算法神经超采样。
新算法实现了低分辨率视频的4*4的实时渲染,也就是说能把大部分视频分辨率提升16倍,直接变成4K视频!
而1080p的视频渲染延迟更是控制到24.4ms!
除了超低延迟,这种算法的巨大进步在于摆脱了特定硬件和技术的束缚(如虚幻引擎的TAAU和英伟达的DSSL),在PC上就可以实现。
高糊骑兵视频马上变4K!
话不多说,直接上实时渲染效果实测。
下图由上至下,分别是低分辨率输入视频、神经超采样算法(分辨率提高16倍)渲染结果、离线渲染目标视频截图。
可以看出,“神经超采样”算法的实时渲染输出&