卡塔尔世界杯科技系列:HDR Vivid 色彩光影的极致表现
在本次世界杯转播中,中国移动咪咕公司在多年积累的制定和落地超高清编解码相关标准的经验基础之上,首次大规模采用咪咕公司参与制定的我国首个超高清高动态范围视频标准——菁彩 HDR (HDR Vivid)技术标准。相比HDR HLG技术以及传统的HDR PQ技术,菁彩 HDR (HDR Vivid)在色彩丰富度、真实还原度、色调映射关系和色彩信息动态调整显示等方面有着更接近真实世界的呈现效果,基于图像学蒙特卡洛方法有效曲线空间计算模型,HDR Vivid曲线比HLG曲线在场景真实还原度方面提升约1.5倍。
图1 HDR Vivid 效果图
背 景 篇
这项技术最早被应用于摄影,可以使暗场景变得更明亮更通透。后来超高清电视论坛(Ultra HD Forum)将HDR技术列为UHD电视标准需要支持的技术之一。2020年,苹果公司宣布了iPhone 12系列手机支持HDR视频,实现了HDR向移动手机端的扩展。目前,电视与移动端使用的HDR技术标准主要包括:Dolby Vision,HDR10,HDR10+以及HLG(Hybrid Log-Gamma)等。这些技术标准中定义了相比传统标准动态范围图像(SDR)更大的亮度范围,更广的色域,更大的比特深度,采用不同的伽马校正的转换函数,新的编解码方式。
技术 篇
颜色是源自光的反射或者自身发出的光芒,那光真的有颜色吗?牛顿爵士在1671年写道:“准确地说,光是没有颜色的,除了能引起这种或那种颜色的特定能量和配置外,没有其它成分。”
图2 日光、白炽灯、荧光灯,同色不同谱
那人类是如何科学度量颜色的?下面我们从光度学和色度学两方面展开分析。
光度学
最开始,摄影/摄像是黑白的,因此没有色度,主要是靠量化强度和亮度来实现的。光度学就是对在可见光波段内,考虑到人眼的主观因素后的相应计量学科。光度学是1760年由朗伯建立的,且定义了光通量、发光强度、照度、亮度等主要光学光度学参量,并用数学阐明了它们之间的关系和光度学几个重要定律,如照度的叠加性定律、距离平方比定律、照度的余弦定律等,这些定律一直沿用,实践已证明是正确的。
最主要的指标是光亮度,概念是单位投影面积、单位立体角发出的光通量,单位为尼特(nit)。光亮度是一个叠加人眼感受的计量单位,单位为nit。可以表征视频内容的明暗程度。
色度学
后来随着技术的发展,摄影和摄像支持彩色的采集和呈现,因而引入了色度学来完善对颜色的科学度量。
最开始是基于三色理论, 20世纪20年代,学界发起了一系列颜色匹配实验,实现色度的量化。后来国际照明委员会(CIE)基于他们的实验给出了CIE的各种关于颜色的结论和标准。
直接的实验结果(CIE1931RGB)会存在负值,用起来不方便也不易于理解,因此要进行数学转换,从三维的 RGB 转换成了二维的RG,但是直接转换结果存在负值不方便读取。用假想的三个原色 XYZ 代替 RGB 系统的三原色做了坐标变换,形成了我们最常见的 CIE1931 x-y 色度图。
这是理论上人类所能看到的色域的全集,再结合前面介绍的光亮度的度量指标,SDR和HDR都以此作为标准基础。
HDR 的核心特征
1. 高动态范围
图4 HDR和SDR定义的亮度范围示意图(来源LiveVideoStack)
2. 宽色域
HDR 能够表示比现行的 SDR 视频系统更宽的色彩范围。SDR视频采用的是BT.709的色彩空间,只能涵盖CIE 1931色彩空间的35.9%,而采用BT.2020的HDR视频占比可以达到75.8%。这样在显示器上呈现的图像与实际物理世界更加贴近。
图5 HDR色彩容积空间和SDR的对比
3. 高位深
传统的SDR视频是用8 bit位深来表示,BT.2020 标准提高到了 10 bit /12 bit,从而使灰阶过渡更加平滑,可以提升图像的细节表现,这意味着图像具有更加丰富的颜色表现。
下面讲一下HDR实现应用的光电转换曲线。
HDR视频通常使用两种标准格式实现光电转换,如表1所示。分别为 HLG(BBC 基于 ARIBSTD-B67 标准),和 PQ 标准格式(Dolby 基于 SMPTE ST.2084 标准)。对比两种标准,HLG 格式允许输出亮度从 0.01 到 5000 尼特左右且具有兼容 SDR 的优势,PQ 格式允许输出亮度水平从 0.0001 尼特到 10,000 尼特。
SDR、PQ 和 HLG 的光电转换曲线对比如图6中所示,伽马2.4是 SDR 光电转换曲线。相比于 SDR 的转换曲线,PQ 和 HLG 在低光照区域和高光区域都做了非线性扩展,具有更高的动态范围。多种标准为行业提供了不同场景的解决方案,但是为行业发展带来了不便。
图6 SDR,PQ和HLG光电转换曲线对比
1. 超高动态对比度,让亮部与暗部的丰富细节同步呈现
例如在一般的足球比赛直播中,往往比较容易出现高光区域细节丢失的情况,也称为过曝现象。我们采用动态元数据,基于对足球场景的分析,构建映射曲线,高亮部分得以有层次地保留;同时将终端设备的能力纳入考量,根据显示屏亮度进行渲染,使得足球场景得到最大程度的视觉还原。
图10 左图为HDR效果表现出更多亮区细节
同时兼顾暗部细节,我们通过 pheonix 分段映射曲线的设计,针对较暗区域进行保护,不压缩其亮度(采用直线映射),保留了原有的细节。
逐帧矫正,结合时域信息,展现更多细节,且不产生闪烁。比赛中,当足球场景阴阳面,亮度范围广,主要亮度灰阶主要集中在阴阳两处,形似“驼峰”,亮度范围的压缩,往往会发生色相偏移失真。咪咕视频的菁彩 HDR 方案在利用映射曲线进行亮度映射后,会针对色相进行校正与补偿,使其更加接近片源的原始风格。
图14 多终端的菁彩HDR效果显示效果一致性
产业篇
表2 当前主流HDR标准对比
当前HDR Vivid产业生态趋于成熟,产业链各环节均有产品支持。
芯片领域,海思、联发科、晶晨、国科微、联咏、瑞芯微、高通等国际主流芯片厂商都已经发布了支持HDR Vivid技术标准的芯片产品。
终端领域,华为、康佳、夏普、荣耀等电视终端厂家发布了多款支持HDR Vivid的电视、手机和平板。中国移动、中国电信也已将HDR Vivid纳入到机顶盒必选技术标准。
内容制作:国内领先的编辑工具厂商索贝、全球调色工具市场份额第一的Blackmagic Design达芬奇和高端调色工具厂商FilmLight都发布了支持HDR Vivid原生调色的工具版本。
视频平台,内容规模超过15000小时,并在持续增长。咪咕、腾讯、爱奇艺、华为、优酷等视听内容服务平台,自2021年起,逐步推出 HDR Vivid 点直播内容服务。我们在内容方面也做了重点部署和诸多尝试。2021年欧洲杯,我们首次运用HDR Vivid技术于国际大型体育赛事直播,全面提升画面整体的色彩层次和画质细节,动态画面更流畅、更清晰。HDR Vivid(菁彩HDR)标准制定和落地过程中,中国移动咪咕公司与央视、华为、当虹等产业伙伴深度协作,共同打造了技术标准及直播端到端应用方案,率先在21年的欧洲杯业内首次应用,2022北京冬奥会首次实现软渲染方案、2022世界杯中首次大规模商用,为观众带来“5G+全体育”全场景沉浸式观赛体验。
展望篇
随着5G网络建设的逐步完善以及终端显示能力的进一步迭代与升级,“真实”与“沉浸”兼具的超高清视频体验时代已经到来。当前 HDR Vivid 产业面临着挑战和机遇。
首先,HDR Vivid 采集制作的效率亟待提升。仍需大力提升生产效率,降低生产门槛,助力 HDR Vivid 内容的高质量生产。建议非编软件可以方便快捷地生成 HDR Vivid 动态元数据和母版文件。例如只需在现有制作环境中增加一个流程节点,即可在HDR调色后生成母版文件,同时能进行微调,可大幅减少 HDR Vivid 规模制作的繁琐步骤,进一步促进产业发展。
其次,支持 HDR Vivid 显示能力的终端逐步规模化。内容服务平台将继续探索 HDR vivid 落地场景,大小屏、云游戏均有布局与探索。新的场景促进 HDR Vivid 技术能力的产业落地,促进HDR Vivid内容多样化供给。
此外,HDR Vivid 技术优势有待更充分发挥。在多场景下,HDR Vivid 未来将直面用户的检验,如何进一步挖掘 HDR Vivid 技术潜力,真正实现世界一流的 HDR 显示渲染效果,需要整个产业的共同努力。
从产业链布局看,视频消费几乎与信息产业的所有环节都有关联和渗透,是包括互联网在内的整体信息产业价值的最重要来源。UWA 联盟的建立以及 HDR Vivid 标准的制定,准确把握了时代脉搏,在视频行业向超高清升级的关键时期,精准解决了用户观看更贴近真实自然画面的需求,由此通过吸引和带动用户在高品质内容上的消费,也为行业相关企业的发展带来了新的契机与增长点。
作者:潘兴浩、马晓、毕蕾
[1] http://graphics.stanford.edu/courses/cs178/applets/locus.html
[2] https://www.hisilicon.com/cn/techtalk/hdr-vivid
[3] HDR Vivid高动态视频技术白皮书
[4] High Dynamic Range Electro-Optical Transfer Function of Mastering Reference Displays,ST 2084:2014
[5] Ultra HD Forum. Ultra HD Forum Guidelines.
[6] 齐欣编著.摄影用光经典法则:上海人民美术出版社
[7] Multi-exposure HDR capture
https://en.wikipedia.org/wiki/Multi-exposure_HDR_capture
[8] HDR技术趋势浅析 https://mp.weixin.qq.com/s/mIU9IdoihZur40CN-qZqPw
[9] 向高标准影像呈现演进!HDR Vivid开启超高清视听新体验:影视制作
关键词
标准
超高清
技术
HDR视频
内容
最新评论
推荐文章
作者最新文章
你可能感兴趣的文章
Copyright Disclaimer: The copyright of contents (including texts, images, videos and audios) posted above belong to the User who shared or the third-party website which the User shared from. If you found your copyright have been infringed, please send a DMCA takedown notice to [email protected]. For more detail of the source, please click on the button "Read Original Post" below. For other communications, please send to [email protected].
版权声明:以上内容为用户推荐收藏至CareerEngine平台,其内容(含文字、图片、视频、音频等)及知识版权均属用户或用户转发自的第三方网站,如涉嫌侵权,请通知[email protected]进行信息删除。如需查看信息来源,请点击“查看原文”。如需洽谈其它事宜,请联系[email protected]。
版权声明:以上内容为用户推荐收藏至CareerEngine平台,其内容(含文字、图片、视频、音频等)及知识版权均属用户或用户转发自的第三方网站,如涉嫌侵权,请通知[email protected]进行信息删除。如需查看信息来源,请点击“查看原文”。如需洽谈其它事宜,请联系[email protected]。