ICCV2021 SDR2HDR论文笔记:A New Journey from SDRTV to HDRTV

HDR视频转换研究:SDR2HDR的深度学习解决方案
本文深入探讨了SDR到HDR视频转换的重要性,分析了两者之间的差异,并提出了一种三步骤解决方案,包括全局色彩映射、局部增强和高光生成。作者创建了HDRTV1K数据集并提出了新的评价指标,为视频处理领域的研究提供了新视角。

code: https://github.com/chxy95/HDRTVNet

本文是ICCV2021文章《A New Journey from SDRTV to HDRTV》的阅读笔记,其完成了视频sdr2hdr问题的定义、问题特性的分析、提出了一种方法、公开了一个数据集HDRTV1K、提出了5种评价指标,接下来记录了文章的要点。

1. introduction

  • 为什么需要sdr2hdr算法?

    (1) 视频内容正在从标清、高清向超高清发展,而高动态范围则是超高清内容的一个重要的特点

    (2) 高动态范围视频所呈现出的内容更接近于人眼在自然场景中的感官

    (3) 而随着支持高动态范围的设备越来越普及,但大部分视频内容仍是hdr格式

  • 为什么这么重要,相关研究却这么少?

    作者认为原因有两个:

    (1)hdr10和hlg这些hdr标准最近才被定义好;

    (2)缺少大规模数据集用于训练和测试;

  • 分析了sdr2hdr与相关课题的关系

    (1)sdr2hdr是高度病态的问题,他们具有不同的动态范围、色域和位深

    In actual production, contents of SDRTV and HDRTV are derived from the same Raw file but are processed under different standards. Thus, they have different dynamic ranges, color gamuts and bit-depths.
    在实际制作中,SDRTV和HDRTV的内容来源于同一个Raw文件,但处理的标准不同。因此,它们具有不同的动态范围、色域和位深度。

    (2) 在某种程度上,与image-to-image translation such as Pixel2Pixel [11] and CycleGAN有些相似

    (3) ldr2hdr在名字上跟sdr2hdr相近,其实并不是一个东西,ldr2hdr旨在预测线性域中的HDR场景亮度,本质上更接近raw file

    On the contrary, the task of LDR-to-HDR, which is similar in terms of name, has completely different connotations. LDR-to-HDR methods [21, 26, 10, 24, 5] aim to predict the HDR scene luminance in the linear domain, which is closer to Raw file in essence

    (4) 同时进行超分和sdr2hdr的工作

     Deep SR-ITM and JSI-GAN
    
  • 介绍evaluation metrics

PSNR: mapping accuracy
SSIM, SR-SIM [36]: structural similarity
∆E_ITP [17]
回答: 当将RAW视频转换为SDR视频和HDR视频时,会根据不同的标准进行处理,从而得到不同的结果。SDR视频是标准动态范围的视频,通常使用8位的图像表示,像素值范围在0到255之间。而HDR视频是高动态范围的视频,可以显示更丰富、更真实的颜色和对比度。HDR视频通常使用10位或12位的图像表示,像素值范围更大。 在转换过程中,会对RAW视频进行色彩分级和调整,以适应不同的动态范围和色域。SDR视频的动态范围较窄,色域较小,而HDR视频的动态范围更广,色域更大。因此,在转换过程中需要对亮度、对比度和色彩进行调整,以保持画面的一致性和质量。 HLG视频是一种特殊的HDR视频格式,它采用了一种混合的传输函数,可以同时适应SDRHDR的显示设备。这意味着HLG视频可以在不同类型的屏幕上播放,而无需进行额外的色彩分级或转换。这使得HLG视频在广播和流媒体领域具有很大的应用潜力。 总之,将RAW视频转换为SDR视频和HDR视频需要根据不同的标准和要求进行处理,以获得适合不同显示设备的视频内容。这涉及到动态范围、色域和位深度等方面的调整和优化。 #### 引用[.reference_title] - *1* [各种HDR标准的技术细节,读这一篇就够了](https://blog.csdn.net/q274488181/article/details/123363809)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^insertT0,239^v3^insert_chatgpt"}} ] [.reference_item] - *2* [嵌入式音视频疑惑汇总(持续更新)](https://blog.csdn.net/weixin_43233219/article/details/130882134)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^insertT0,239^v3^insert_chatgpt"}} ] [.reference_item] - *3* [ICCV2021 SDR2HDR论文笔记:A New Journey from SDRTV to HDRTV](https://blog.csdn.net/BigerBang/article/details/124043708)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^insertT0,239^v3^insert_chatgpt"}} ] [.reference_item] [ .reference_list ]
评论 9
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值