• 博客(11)
  • 收藏
  • 关注

原创 画质评测|一次关于视频画质的探(zhǎn)讨(xiàn)

消费侧的用户体验是创作者最关心的问题,也是快手音视频技术团队高度重视的方向。目前,快手是国内首家同时支持1080P高分辨率、60帧高帧率、HDR高动态范围以及4K全景视频的短视频平台。首先,介绍一下短视频的生产-消费链路。我们将链路划分为与视频画质相关的三个主要阶段:拍摄阶段、编辑阶段和服务端处理阶段。这三个阶段都有对应的编解码、视频增强或处理过程,均会对用户消费视频的画质造成影响,这也是快手视频技术竞争力的重要体现。通过与其他短视频产品进行画质评测,我们得出结论:对于随机抽取的15组视频,快手

2021-09-27 16:56:27 1767

原创 ACM MM2021 | 快手获得Grand Challenge第一名

近日,多媒体领域国际顶级会议ACM Multimedia2021在中国成都举办。在会议的Grand Challenge环节,快手音视频网络传输算法团队(Kwai2021)获得了ACM MM Grand Challenge: Meet Deadline Requirements比赛第一名。01背景实时音视频的应用场景越来越广泛。在疫情爆发后,人们的交流快速转到线上,进一步催生了RTC(Real-Time Communication)类应用的爆发,例如视频会议、在线办公等。RTC类应...

2021-10-26 15:02:33 807

原创 快手视频画质提升算法的探索和应用

上期「画质评测|一次关于视频画质的探(zhǎn)讨(xiàn)」中分享了快手与其他短视频产品的画质清晰度对比情况,简要阐述了短视频的生产-消费链路,并提炼出与视频画质相关的几个主要阶段:拍摄阶段、编辑阶段和服务端处理等阶段。其中,服务端承接视频的上传和下发,该阶段的处理会影响用户体验和带宽成本,这也是优化短视频画质的技术主战场。在讨论服务端的编解码、视频增强或处理过程之前,我们先了解以下三个问题:为什么服务端要对视频进行再次编码?用户上传视频时,由于受到手机运算性能等影响,移动端能进行的视频

2021-09-27 18:39:48 1326

原创 CAPE:快手关于智能化处理和编码的有力实践

针对复杂的视频业务场景,快手音视频技术团队致力于将“定制化”的算法决策变成通用环节,使每个视频都能获得最优的处理和编码方式。在编解码领域,CAE的概念提出和理论研究已经有一段时间,一些视频平台也有相关方向的应用。而快手将“处理”(Processing)加入到“内容自适应”(Content Aware)的环路中来,形成了CAPE的整体优化理论,从视频处理与编码的完整通路全局优化视频体验。对于快手而言,平台上视频类型繁杂,其最大的难点就在于如何衡量质量,及如何寻找到一个质量“足够好”的工作区间。CAPE

2021-09-27 18:33:55 550

原创 CVPR2021系列(四)—— 深度视频抠图

01背景抠图是图像处理里的重要技术之一,被广泛应用于图片/视频编辑,影视制作等实际场景中。传统的抠图技术利用图像的色彩等底层特征来分离前景,但其效果受制于底层特征的有限表达能力。随着深度学习的发展,深度神经网络被应用于抠图技术中,从深度网络提取的高层语义特征能够从复杂场景中准确区别前后背景,从而极大地提升了抠图效果,基于深度学习的图像抠图技术也因此成为主流的图像抠图技术。近年来,短视频的大热进一步催生了更复杂的视频抠图的需求,如何提升视频抠图效果也成为了时下的重要课题之一。抠图问题可以用公式 定..

2021-09-27 18:12:17 1202

原创 CVPR系列(三)—— 协同显著性物体检测

01背景人类的视觉系统复杂且高效,不仅可以从单张图片中检测出最吸引人的物体,还能从一组图片中提取出图像中共现的物体。对于计算机来说,前一种能力被称为显著性物体检测,而后一种能力被称为协同显著性物体检测。显著性目标检测只需要对单张图片进行处理和检测,根据人眼的视觉注意机制找出图片中最具有信息量的区域和物体。而协同显著性物体检测需要对一组图片中的多张图片进行处理,通过探索多张相关图片之间的内在联系来发现图像中共同的显著目标。但是现有的协同显著性目标检测算法的辨别能力不足,无法区分不同类别的物体。我们提.

2021-09-27 18:00:53 1524

原创 CVPR系列(二)—— 双图层实例分割,大幅提升遮挡处理性能

01摘要由于物体的真实轮廓和遮挡边界之间通常没有区别,对高度重叠的对象进行分割是非常具有挑战性的。与之前的自顶向下的实例分割方法不同,本文提出遮挡感知下的双图层实例分割网络BCNet,将图像中的感兴趣区域(Region of Interest,RoI)建模为两个重叠图层,其中顶部图层检测遮挡对象,而底图层推理被部分遮挡的目标物体。双图层结构的显式建模自然地将遮挡和被遮挡物体的边界解耦,并在Mask预测的同时考虑遮挡关系的相互影响。作者在具有不同主干和网络层选择的One-stage和Two-stage目.

2021-09-27 17:51:25 620 2

原创 CVPR2021系列(一)—— 语义图像抠图

一、背景随着短视频和直播应用的兴起,人们对图像视频编辑的需求逐渐增多。抠图技术作为图像视频编辑的基础能力之一,也越来越受到学术界、工业界及互联网行业等的关注和研究。一张图像可以简单看成是由两部分组成,即前景和背景。而图像抠图(Image Matting),就是指从图像中提取出我们所感兴趣的前景目标,同时过滤掉背景部分。假设原始图像用来表示,α为对应的Alpha通道,和分别表示对应的前景和背景图像。那么一张RGBA通道的图像可以通过公式得来。不同于语义分割,抠图属于软分割(Soft ...

2021-09-27 17:44:57 956

原创 当全景视频遇到快手

收到山巅之处,正午的阳光透过翻滚的云海铺洒在岩石壁上,镶嵌在天边连绵起伏的山峦若隐若现,雄伟壮观。俯瞰去,脚下是天梯般陡峭的山崖,连接着山中绿洲。纵身一跃,映入眼帘的是逐渐清晰的林海,那些拔地而起的树木紧密相连,铸成一座郁郁葱葱的“绿色长城”。这仙境一般的景色来自于一位翼装飞行爱好者的独特视角。从山巅俯冲,一路罕见的风景被他记录了下来,并通过快手全景视频向用户们分享了飞行时360度的视角。惊险翼装飞行除了翼装飞行,用户在快手上还能看到花样滑雪、高空跳伞、潜水等极限运动的全景视频。创作者

2021-09-27 16:41:05 485

原创 黑马冠军快手在国际回声消除大赛中战绩颇丰

在线会议中,回声带来的全员焦虑感,相信大家并不陌生。戴耳机、静音、重启等慌乱中的应急方法,有时不仅不能解决问题,还可能会带来用户体验和办公效率的降低,而真正能够从根源解决回声干扰问题的方法是提升回声消除技术的鲁棒性、稳定性和效果。而这,也是快手音视频技术的同学们一直在攻坚的方向。一、快手回声消除技术斩获单项世界冠军为促进回声消除技术的发展与研究,全球音频技术的顶级会议Interspeech 2021组织了AEC Challenge(Acoustic Echo Cancellation Chall

2021-09-27 16:21:38 402

原创 直击奥运直播拆条背后的三大难点

作为本届奥运会持权转播商以及全球首家参与奥运赛事转播的短视频平台,快手为百年奥运开启了短视频传播的“元年”。在17天赛期内,有趣又有料的赛事内容、多样化的奥运栏目不间断呈现。而在东京奥运赛场之外,快手云剪技术团队同样经历着一场激烈的赛事。17天的时间,内容制作团队通过快手云剪平台生产了超过1万个视频作品,创造了高达百亿级别的播放量。快手云剪“奥运成绩单” ????●产出1万+视频作品,创造了百亿级播放量●强时效,分钟级短片段60秒内产出●16小时级别直播流不中断连续拆条●3小时.

2021-09-27 16:11:18 2167

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除