腾讯技术开放日 | 保障视频连线画质清晰且流畅，腾讯会议有这些优化实践

 

 

腾讯会议自去年12月底推出，在疫情期间极速扩容，日活跃用户超过1000万。面对数量庞大的用户，以及他们背后网络、设备的多样性，该如何针对各个场景进行优化以提升用户体验？在【腾讯技术开放日 · 云视频会议专场】中，腾讯多媒体实验室视频技术专家王诗涛针对视频编码技术优化实践进行了分享，讲述如何利用视频技术达到清晰流畅，低延时的用户体验。

 

屏幕分享场景编码技术优化实践

 

在视频会议中，视频的应用场景分两部分：屏幕分享和摄像头视频。屏幕内容是由电子设备生成的图像，摄像头内容是由摄像头采集的视频，两种视频内容的特征差异巨大。

 

 

传统的视频编码采用的是预测加变换的混合编码结构，这种方式适合摄像头采集的视频。但是对于屏幕内容，它的编码效率不太好。为了提升压缩效率， HEVC (High Efficiency Video Coding)针对屏幕内容专门推出了HEVC-SCC编码标准，可以大大提升屏幕内容的编码效率。

 

HEVC-SCC在HEVC原有标准的基础上，增加了帧内块拷贝、调色板模式、自适应色彩转换、自适应运动矢量精度几个编码工具集。这几个工具集中，帧内块拷贝（IBC）和调色板模式（Palette Mode）对视频压缩效率的提升最为明显。IBC采用当前帧已重建块作为预测块，可以认为是基于当前编码图像内的运动补偿；Palette Mode枚举颜色值生成颜色表，然后为每个样本传递一个索引以指示它属于颜色表中的哪种颜色，它特别适合颜色数比较少的编码块。根据官方统计，对于屏幕内容，在HEVC的基础上 增加IBC和Palette Mode两个工具集，可以带来50%以上的压缩效率的提升。

 

1. TSE兼顾压缩效率与编码复杂度

 

加入SCC（屏幕内容编码技术， Screen Content Coding）虽然可以提升压缩效率&#