多层特征融合与语义增强的盲图像质量评价

摘要: 针对现有盲图像质量评价算法在面对真实失真图像时性能较差的问题，本文提出多层特征融合和语义信息增强相结合的无参考图像质量评价算法。提取图像的局部和全局失真特征，利用特征融合模块对特征进行多层融合；利用多层扩张卷积增强语义信息，进而指导失真图像到质量分数的映射过程；考虑预测分数和主观分数之间的相对排名关系，对L1损失函数和三元组排名损失函数进行融合，构建新的损失函数Lmix。为了验证本文方法的有效性，在野生图像质量挑战数据集上进行了验证和对比实验，该算法的斯皮尔曼等级相关系数与皮尔逊线性相关系数指标相比原算法分别提升2.3%和2.3%；在康斯坦茨真实图像质量数据数据集和野生图像质量挑战数据集上进行了跨数据集实验，该算法在面对真实失真图像时表现出了良好的泛化性能。

• 关键词: 
• 深度学习  /  
• 图像质量  /  
• 卷积神经网络  /  
• 特征提取  /  
• 通道注意力结构  /  
• 多层次特征融合  /  
• 扩张卷积  /  
• 三元组损失函数  

图像在采集、存储、传输中可能存在着模糊、噪声等失真问题[1]。图像质量评价(image quality assessment, IQA)旨在为各种失真图像进行质量的评级打分，对多种图像处理算法的评估、改善图像的视觉体验具有重要意义。最直接的图像质量评价方法是根据人类的视觉感知进行评分，但是这种方法会被人的主观因素所影响，且耗时费力。随着计算机技术的不断发展，在没有人工干预的情况下，可自动进行图像的质量评价[2]。全参考图像质量评价算法要求利用高清晰度、无失真图像作为参照，传统的全参考图像质量评价算法