NIMA:Neural Image Assessment论文阅读笔记

与RankIQA一样,本文也是针对no-reference IQA任务进行研究的,本文的贡献在于提出了一种新的类型的方法来解决该问题。

  • predict the distribution of human opinion scores using CNN

  1. 由于人类对同一张图片的评价不总是都是一样的,每个人都有自己的品味,那么只是单一的回归质量分数会导致与实际的结果不会有多大接近。
  2. 基于这个想法,本文提出预测图片的质量评价概率分布,以人类对图片的质量评价概率分布为target,计算出EMD(earth mover's distance)-based loss,进行反向传播。
  3. 不用回归而用分类是因为根据相关文献指出基于分类的做法效果更好些,而这个分类也不是纯粹的相互独立地分类,因为类与类之间也有比较关系,而EMD-based loss就可以做到这一点。

  • 简单解释下上述公式,p(ground truth)与p冒分别是人类评价图片质量的分数(分数总共为10档)概率分布和预测到的分数概率分布。
  • N为分数的档数,本文中设为10,r表示范数的类型,CDF是对概率分布的累加函数(例如概率分布为0.1,0.2,0.3,0.4,那么CDF(k) = 0.1,0.3,0.6,1.0,k=1,2,3,4)。

而最终一张图片的综合评价则是由分数概率分布的均值与标准差来决定的,均值代表了这张图片的质量分数,标准差代表了非常规程度。

  • 0
    点赞
  • 5
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
### 回答1: iqa-nima是一种针对图像质量评估的深度学习算法,利用神经网络自动学习图像质量的特征,可以准确地评估图像的质量。该算法是基于NIMA(Neural Image Assessment)算法的改进版本,增加了对ISO等其他图像质量因素的考虑。 iqa-nima算法主要包括两个部分:训练阶段和测试阶段。在训练阶段,算法利用已有的高质量图像和对应的主观评价分数训练神经网络,学习图像质量的特征。在测试阶段,通过输入待评估的图像,经过神经网络计算得到图像的质量分数,从而进行图像质量评估。 iqa-nima算法采用了效率较高的ResNet架构作为神经网络,在训练阶段引入了数据增强和随机扰动等策略,提高了算法的鲁棒性。在测试阶段,算法还提供了集成多个神经网络的选项,可以进一步提高评估结果的准确性。 总的来说,iqa-nima是一种高效准确的图像质量评估算法,可以广泛应用在图像处理和计算机视觉等领域。 ### 回答2: iqa-nima是一种用于评估图像质量的算法。它基于神经网络,并利用了自然图像的统计规律来预测图像的质量。iqa-nima的全称是“Natural Image Quality Evaluator using Multi-scale Spatial and Spectral Features with Gradient Boosting Machine”。与其他传统的图像质量评估算法相比,iqa-nima具有较高的精度和鲁棒性。在实际应用中,iqa-nima可以用于图像压缩、图像增强、图像复原等场景中,用于判断图像质量改变的程度。iqa-nima的实现过程主要包括图像预处理(将输入图像转换为多尺度和多频段的特征图)、特征提取(利用CNN从特征图中提取空间和频谱特征)、训练模型(采用GBM,构建回归模型进行参数学习和预测)和评估图像质量(将图像输入模型进行预测)。iqa-nima的代码较为复杂,需要深入掌握图像处理、机器学习等相关领域的知识。 ### 回答3: iqa-nima 是一种基于神经网络的图像质量评价算法。该算法使用了深度神经网络模型来学习图像质量的特征,然后预测图像的质量分数。iqa-nima 算法的主要特点是高精度和高效率。与传统的基于数学模型的评价方法相比,它能够更加准确地评估图像质量。 iqa-nima 算法的核心思想是将图像转化为特征向量,然后再将特征向量输入到神经网络模型中进行学习和预测。该模型采用了一种叫做残差模块的结构,使得模型具有更好的拟合能力和泛化能力,从而提高了模型的预测结果的准确性。 此外,iqa-nima 算法还使用了一种特殊的损失函数,称为对比损失函数。该损失函数能够引导模型学习到图像质量的一些高级特征,从而提高了模型的鲁棒性和可靠性。在训练阶段,模型需要学习尽可能地准确地预测每张图像的质量,而在测试阶段,模型可以对新的图像进行评价和预测,从而提供更加准确的结果。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值