感知视频编码---自由能引导的率失真优化

自由能—free-energy principle
The freeenergy principle suggests that the human visual system (HVS)
can actively predict “orderly” information and avoid “disorderly”
information for image perception. Basically, “orderly” is associated
with the skeletons and edges of objects, and “disorderly”
mostly concerns textures in images. Based on this principle, an
image is separated into orderly and disorderly regions, and
processed differently in image quality assessment (IQA).
大致意思：自由能理论指出，人眼对有序的信息更容易接受和关注到，而对无须的信息则比较排斥，不感兴趣。而图像的有序和无序可以通过他们的边缘，纹理，结构等信息来表示。通过这些信息的提取，可以将图像分割成有序区域和无序区域。在图像质量评估的时候可以区别对待。

这个Free-energy principle的理论其实可以简单概述成，人眼对纹理复杂区域不敏感，对纹理简单区域敏感。同时，在结构信息比较重要的图像中，需要将结构信息另外提取出来。充分提升视频编码的感知性能，重点在于如何有效的提取出感知信息，并将这些感知信息合理的应用到编码过程中去。

参考文献：Free-energy Principle Inspired Video Quality Metric and Its Use in Video Coding