JVET-E0021 AHG8: On 360 video testing procedure V. Zakharchenko, C. Kim, E. Alshina (Samsung)
内容简介:
该提案不同投影格式间的质量评估进行了研究,提出了改进方案。360视频压缩包含了在不同投影格式之间的多种变换处理,因此ground truth的定义可能影响压缩结果。研究表明spherical PSNR和CPP-PSNR没有考虑变换失真,都会产生误导结果。因此需要对ground truth进行确定的定义。
主要内容总结:
目前存在多种360视频投影格式且在不断增加,这就导致了需要在所有可能的投影组合之间进行质量比较,同时需要考虑给任意投影提供同等的评估条件。
该提案考虑了投影间压缩评估的质量评估工作流程保真度。研究了根据目标提出的每一种质量评价方法的ground truth信号的定义,并给出了相应的仿真结果。
下图为投影间质量评估的流程图。360视频以high-fidelity ERP格式输入,1过程通过插值滤波器进行格式转换,因此会引入失真,360Lib中的CPP-PSNR和S-PSNR没有考虑该失真,只有viewport-PSNR是直接由high-fidelity ERP生成的。因此如果使用CPP-PSNR和S-PSNR比较不同格式组合的压缩性能是不对的。
该提案提议使用如下方案:
其原始视窗从high resolution ERP生成而不是由coding projection生成,同样的CPP-PSNR和S-PSNR的球形投影也是由high resolution ERP生成。这样,所有投影的原始视窗是完整的,而且CPP-PSNR和S-PSNR的ground truth和其他的投影也是相同的。同时考虑了压缩和变换两方面引入的失真。
另外有些序列的视频内容包含两部分:原始拍摄得到的和合成的。合成部分会产生额外的失真,因此建议在WS-PSNR中将合成部分权重置为0,来移除合成部分。