淘宝直播在智能互动领域的探索及落地

简介： 随着带宽成本的降低和端上算力的提升，在直播、短视频中基于流的互动玩法也将越来越丰富；无论是基于人脸、手势、分割算法的智能化贴纸，还是结合算法的小游戏有了越来越好的舞台；业界短视频和直播主要针对的娱乐性的场景，更是将娱乐化的玩法用到了极致，例如抖音的仿flappy bird潜水艇小游戏，最气的漫画风格的拍摄玩法都引爆成为热点。抖音有PC的玩法生产工具EffectCreater生产工具和移动端的玩法社区特效君，已经打打造了一个支持数以万计的设计师的生态圈。

背景

随着带宽成本的降低和端上算力的提升，在直播、短视频中基于流的互动玩法也将越来越丰富；无论是基于人脸、手势、分割算法的智能化贴纸，还是结合算法的小游戏有了越来越好的舞台；业界短视频和直播主要针对的娱乐性的场景，更是将娱乐化的玩法用到了极致，例如抖音的仿flappy bird潜水艇小游戏，最气的漫画风格的拍摄玩法都引爆成为热点。抖音有PC的玩法生产工具EffectCreater生产工具和移动端的玩法社区特效君，已经打打造了一个支持数以万计的设计师的生态圈。

淘宝直播和短视频更偏向电商场景，我们也在探索这些玩法在直播和短视频中的应用，对提升直播间停留时长，丰富直播间和短视频内容；其中在视频流里面渲染和算法调用几乎都是Native的能力，如果用iOS和Android上分别实现，性能较难把控，开发成本、上线和下线成本高，必须在活动前很长时间开发，然后随着版本发版，活动结束后为了减少包大小，又需要将代码删除，