阿里云视频云视频增强领域最新研究成果入选国际顶级学术会议

ICASSP 2022（International Conference on Acoustics, Speech and Signal Processing）是全球最全面的信号处理及其应用方面的顶级会议。会议内容涵盖了音频和声学信号处理，图像、视频和多维信号处理，物联网的信号处理等多个方向，是IEEE信号处理协会主办的信号处理及其应用的旗舰会议。

凭借在视频编码与增强领域的深厚积累和前沿创新，阿里云视频云视频编码与增强技术团队的最新研究成果《基于可变形卷积的压缩视频质量增强网络》(Deformable Convolution Dense Network for Compressed Video Quality Enhancement ) 被ICASSP 2022 Image, Video & Multidimensional Signal Processing 主题会议接收。

随着5G时代的到来，互联网短视频、电影电视剧、电商直播、游戏直播等视频业务呈井喷式发展。视频内容消耗了大量的网络带宽和存储，如何在有限传输带宽下，克服海量视频消费者并发的瓶颈，同时保障终端用户的观看体验，这正是阿里云视频云窄带高清产品要解决的问题，其核心目标是研究如何用更低的码率达到高清的用户体验。云端转码是窄带高清产品的主要应用场景，然而云端转码的视频源多种多样，质量参差不齐，比如有些视频经过高强度的压缩带有很明显的压缩失真，在转码之前就需要先做去压缩失真提升视频质量，从而保证转码后的高清体验。

针对该问题，学术界主流方法是利用时域多帧信息融合进行压缩视频质量提升。这类方法大多严重依赖帧间光流估计，然而不准确且低效率的光流估计算法限制了增强算法的性能。

作为窄带高清产品的技术责任方，阿里云视频云视频编码与增强技术团队提出了一种结合可变形卷积的稠密残差连接网络结构，该网络结构无需在显式光流估计的帮助下就能完成从高质量帧到低质量帧的补偿。其核心思路是利用可变形卷积来实现隐式的运动估计，通过稠密残差连接来提高模型对误差的容忍度，在公开数据集上我们的方法显著优于其他baseline模型。基于该技术，极大提升了窄带高清产品对低质量视频的转码效果，为用户提供更好的观看体验，对中高质量视频也有一定提升效果。

阿里云视频云视频编码与增强技术团队专注于阿里云窄带高清产品的持续演进升级，服务于视频点播、直播、媒体生产、媒体处理、RTC（实时通信）、超高清视频等业务。

窄带高清从人眼视觉模型出发，联合视频编码和视频修复增强技术，在节省码率的同时，提供更加清晰的观看体验；

广泛应用于电商直播、在线教育、游戏直播、体育直播、视频网站、短视频、娱乐社交、新闻传媒等行业；

基于窄带高清的直播点播等产品支撑了阿里集团内优酷、手淘、钉钉等重量级业务，承接了世界杯、双11、春晚等重大赛事直播；

为2022年“云上冬奥”和阿里云聚“Alibaba Cloud ME”提供了重要技术支持；

同时也在和高校开展多方面的合作和布局，如基于模拟编码器的视频编码和处理端到端联合优化，在主观、生成和处理背景下的视频质量评估等。