一种全景视频的主观质量评价方法（译）

A subjective visual quality assessment method of panoramic videos

ICME 2017

abstract

与传统的2D视频不同，在头戴式设备的帮助下，全景视频提供一个球面的观察方向，这样提高了沉浸式和交互式的视觉体验。但就我们所知，针对全景视频的主观质量评价方法很少。因此，我们在这篇文章中提出了一个评估失真全景视频质量的主观方法。首先我们建立了一个数据库，包含所有的观察者的观察方向信息。然后我们发现，不同主体的观察方向具有高度的一致性。通过这个发现，我们提出了主观测试的流程，得到DMOS分数。为了利用全景视频观看时的不一致性，我们又进一步提出了一个矢量化的DMOS分数。最终，实验结果证明了我们的主观VQA方法，在融合整体DMOS和矢量化DMOS时，衡量质量最有效。

Ⅰ . introduction

VR技术近几年飞速发展。全景视频是VR一个重要的发展方向，可以为人们提供360*180°的视野（FOV）。随着头戴式设备的发展，沉浸式甚至是交互式视觉经验可以通过全景视频实现，这都远远超过了2D视频。然而，似乎全景视频的体验质量（QoE）会由于压缩失真以及低分辨率而动态变化。这样的体验质量下降可能会引起主体的不适，MPEG的调查也对此有所证实。因此，对失真全景视频进行质量评价非常迫切。
主管和客观的方法对全景视频的VQA来说都很重要。对于客观VQA，近期工作已经考虑了全景视频的球形的特征。比如说，Yu提出了基于球的峰值信噪比（S-PSNR）,它在球体上的一组均匀采样点上计算PSNR，而不是矩形映射像素。通过插值算法，S-PSNR可以在不同投影格式下对全景视频进行客观质量评价。[1]提出了一种加权的PSNR，通过使用伽玛校正像素值来计算PSNR和SSIM。
但就我们所知，针对全景视频的主观质量评价方法很少。但是2D视频的主观质量评价却很多。在过去的二十年，国际电信联盟对2D视频提供了一系列的主观评价方法。DSCQS, SSCQS, SSCQE用来决定序列的播放顺序。除此之外，用于2D视频评级的两个广泛使用的指标：一个是平均意见得分（MOS），一个是偏差平均意见得分（DMOS）。近期，这些2D视频的方法被结合以用于其他类型的视频。比例如，Pourashraf等人采用经典主观VQA方法的DMOS来评估视频会议的主观质量。此外，国际电联还通过考虑立体视频的特性，扩展了基于DMOS的立体视频VQA方法。然而，尽管全景视频正在融入我们的日常生活中，但对全景视频的主观VQA的研究却很少。据我们所知，在[1]中提出了关于主观VQA的唯一工作，其中强制主体观看一个全景视频区域，然后简单地应用2D视频的传统主观VQA方法。 但是，这与全景视频的自由视觉体验不一致。
在本文中，我们提出了一种主观的VQA方法，以DMOS 的形式评估受损全景视频的质量损失，符合人类对全景视频的体验。首先，我们建立了一个包含40个主体的观察方向数据的数据库。然后，为了挖掘我们的数据集，我们发现不同人的观察方向在视频内容的引导下高度一致。基于这个发现，我们提出了两个VQA指标，整体DMOS（O-DMOS）和向量化DMOS（V-DMOS），可以分别对全局和局部的退化进行质量衡量。最后，我们验证了主观方法的有效性，通过计算不同分组的主观打分之间的SRCC系数。我们的贡献包括以下两点：
我们建立全景视频的观看方向数据库，对不同主体的观看方向进行一致性分析。
我们提出了一种新的全景视频主观VQA方法，利用我们对观看方向的一致性分析。