画质增强概述-1-定义

一 什么是画质增强

1.1 定义

        所谓画质增强，就是综合运用传统数字图像处理和新兴的深度学习等算法工具，修复图片或视频中存在的各种画质问题，让用户有更好的视觉观看体验

1.2 常见的画质问题及修复工具

        模糊(各种模糊，如运动模糊、镜头失焦等)                                 ->          锐化/去模糊

        分辨率低           ->         超分辨率(简称超分)

卡顿/帧率低 -> 超帧

色彩不够亮丽 -> SDR 2 HDR

对比度不够 -> 对比度增强

噪声 -> 降噪(噪声是最复杂的，因为噪声类型太多了如高斯噪声、椒盐噪声、泊松噪声、散斑噪声等等)

过压缩 -> 消马赛克

雨雪雾 -> 去雨雪雾等

亮度过亮过暗 -> 暗光增强/对比度增强

遮挡类损伤(logo、水印、字幕、遮挡) -> 图像补全(或图像填充)

颜色失真(偏色、缺色等) -> 颜色矫正

黑白照         ->         自动上色

其他损伤(划痕等) -> 去划痕

1.3 画质增强&图像修复&转码

图像修复：严格定义上说，画质增强和图像修复是两个概念，图像修复更强调损伤修复，而画质增强强调点在*画质*，将不符合人眼的特征进行调整以更符合人眼主观体验，我理解最典型的增强是暗光增强，客观世界确实是漆黑一片，但人眼什么都看不到自然体验不好，于是通过暗光增强以后，人能看清画面了，这就是典型的增强。当然，现在很多时候画质增强是图像修复的超集，把他囊括进来了，甚至可以混用了。

转码：对视频画质增强而言，实际上在RGB层面处理完成后，一定是包含转码的，同样的，现在很多云计算产商的转码服务，基本也都会包含一些图像处理技术以提花画质、降低码率。当严格意义上这两者还是有显著不同的，转码本质上强调的是视频编码器的性能(压缩率和压缩速度)，而画质增强更强调画质的提升程度，当然，未来的趋势一定是两者融合，这个在技术上也是必然的，毕竟内核都是用 ffmpeg 嘛，画质增强的各种处理无非就是 ffmpeg 的一个 video filter 而已。