云场景实践研究第79期：熊猫直播

更多云场景实践研究案例，点击这里： 【云场景实践研究合集】联合不是简单的加法，而是无限的生态，谁会是下一个独角兽
作为知名泛娱乐直播平台，熊猫直播数据纬度多、数据量巨大，通过借助阿里云多项服务，不断优化云上资源，最终建立起灵活配置、高扩展性、易于运维的云上架构。本文将带领大家一同了解熊猫直播大视频数据业务的云上历程。

“ 未来，熊猫直播会将依托阿里云，继续深耕大视频数据业务，满足大视频时代不断演进的大数据需求。”

——卢圣刚

熊猫直播大数据技术专家

为了满足大视频时代的大数据需求，熊猫直播经历了从Fluentd + ODPS、到Flume + Ambari、再到Flume + EMR的架构演进历程。

---

采用的阿里云产品

阿里云云服务器 ECS

阿里云 E-MapReduce

阿里云钉钉企业版

---

为什么使用阿里云

阿里云EMR服务具备灵活、快速、存储成本低的优势。

阿里云服务的支撑保障，使熊猫直播能够减少运维工作，更专注于业务。

---

关于熊猫直播

熊猫直播是由上海熊猫互娱文化有限公司创办的一家弹幕式视频直播网站。注册资本为2000万元，法定代表人为龙飞。2016年11月，熊猫直播荣登2016中国泛娱乐指数盛典“中国文娱创新企业榜 TOP30”。

---

熊猫直播的痛点所在

在身处大视频时代的当下，熊猫直播面对分散在MySQL、Redis、MongoDB之中的数据源头，需要实现统一的数据存储；面对不同的业务场景和高速的业务发展，需要实现灵活的横向扩展——不仅能灵活添加开源组建，还需要能快速增加计算节点。

作为高速发展的直播平台，熊猫直播数据纬度多、数据量巨大——累计已经达到PB级，仅仅每天新增的就有几十T。就离线计算的数据量看，每天几百个日常计算任务，以及大量的临时查询需求。

---

为什么选择阿里云？

阿里云EMR服务灵活、快速、存储成本低

阿里云EMR——Elastic MapReduce（E-MapReduce），是基于 阿里云ECS之上半托管开源大数据软件栈。EMR的弹性动态伸缩，能够帮助熊猫直播直线快捷的扩容、缩容EMR Hadoop集群，灵活、快速部署开源大数据服务（HBase、Kafka、Impala，Flink等），还具备数据存储成本低的优势。

阿里云服务能减少运维工作

运维机制对于选择EMR具有关键作用。阿里云企业服务对熊猫直播给予7*24小时 钉钉群支持，快速解决集群使用问题。阿里云服务的支撑保障，使熊猫直播能够减少运维工作，更专注于业务。

---

迁移上阿里云后的成效

熊猫直播借助阿里云服务，不断优化云上资源，最终建立起灵活配置、高扩展性、易于运维的云上架构。

关于熊猫直播的更多实践详情： 熊猫直播：大视频数据业务的云上历程

原文发布日期：2017-12-21

云栖社区场景研究小组成员：董普庆，仲浩。