双十一大屏实时数据展现技术原理

双11数据大屏是指阿里巴巴集团旗下淘宝天猫购物平台在双11购物节期间推出的数据实时展示屏幕，每年双11都是购物的狂欢节，只是这几年直播电商的崛起，气氛没有以前那么浓烈了。

那运营关注的指标，比如GMV数据指标，经过数据的采集、清洗、转换、存储、计算、分析这些过程后，最终是如何呈现在大屏幕，并实时更新数据呢

一般获取实时数据常用的四种方式，可以给大家提供参考，轮询、长轮询、长连接和websorket。它们大体可以分为两类，一种是在HTTP基础上实现的，包括短轮询、长轮询、长连接；另一种不是在HTTP基础上实现是，即WebSocket。

轮询：一般指短轮询，基本原理是客户端每隔一段时间向服务端发起HTTP请求，服务端不管有没有数据更新都会立刻返回请求结果。这种方式比较浪费带宽和占用服务端资源，因为数据什么时候更新你不知道，就会造成无效请求，而且随着用户的增多，服务端的压力也随之增大，因此这种方式不适合在线用户数比较大的web应用。

长轮询：客户端向服务端发起HTTP请求，服务端会处于hold状态，如果数据更新返回请求结果，如果数据一直不更新，超出了时间限制才会返回。客户端收到返回结果后立即重新发起HTTP请求，直至下一次结果返回，再次重复。相较于短轮询，长轮询减少了无效请求，但是长时间的连接挂起也会消耗资源。长轮询适用于实时性比较高业务场景，比如web聊天室这一类的即时通讯。

长连接（SSE）：全称为Server-Sent Events，SSE与轮询方式类似，也是客户端向服务端发起请求，区别在于一个连接不只是返回一次结果。轮询发起请求建立HTTP连接到响应服务端结果后断开连接，而SSE不会断开连接，当有新的数据更新时，允许服务端推送数据到客户端。SSE的优势很明显，它不需要建立或保持大量的客户端发往服务器端的请求，节约了很多资源，提升应用性能，但是sse只适用于高级浏览器，ie不支持，而轮询浏览器兼容性比较好。

WebSocket：HTML5定义的新协议，与传统的HTTP协议不同，可以在客户端和服务端实现全双工通信。简单来说，首先需要在客户端和服务器端建立起一个连接，这部分需要http。连接一旦建立，客户端和服务器端就处于平等的地位，可以相互发送数据，不存在请求和响应的区别。一些股票行情、在线游戏会采用这种方式

参考资料

https://www.jianshu.com/p/87a6edb34172

https://blog.csdn.net/sugelachao/article/details/124490112

https://blog.csdn.net/UG8064/article/details/101334899