3D No-Reference Image Quality Assessment via Transfer Learning and Saliency-Guided Feature Consolid

最新推荐文章于 2022-09-13 11:57:37 发布

Jackybored

最新推荐文章于 2022-09-13 11:57:37 发布

阅读量337

点赞数

分类专栏：图像质量评价

本文链接：https://blog.csdn.net/qq_34116958/article/details/100168837

版权

论文提出一种3D无参考图像质量评估方法，通过迁移学习微调CNN提取特征，并结合显著性图指导的特征融合及多尺度视差信息，最后用SVR训练模型。微调网络能有效提取3D图像失真特征，显著性图强调关键区域，视差信息增强立体感知。

摘要由CSDN通过智能技术生成

摘要

该论文方法主要有两步，第一步采用迁移学习思想，对已存在的网络微调最后一层形成特征提取算子提取特征，第二步使用显著性图作为权重将左右视图提取的特征进行融合，额外的再加上多尺度下的视差信息。将以上提取的特征作为训练所用的数据，最后采用SVR进行训练。

介绍

图像质量评价的主要思想是提取能够反映失真水平的特征，传统的方法里主要有以下两种：基于NSS的特征和基于HVS的特征，但是这些都需要花费大量的时间来寻找这些特征。因此这里的论文方法采用基于CNN的特征提取，首先直接将预训练网络应用于IQA中并不高效，因此这里采用预训练网路进行微调，微调后的网络能够很好的应用于3DIQA特征提取中。在利用微调的网络提取特征后再利用显著性信息进行左右视图的特征融合。3D视图还有一个重要的信息是视差信息，因此这里将视差信息也作为最后特征的一部分，最后将以上所有的特征进行SVR训练。
算法框架 在这里插入图片描述