双11数据大屏是指阿里巴巴集团旗下淘宝天猫购物平台在双11购物节期间推出的数据实时展示屏幕,每年双11都是购物的狂欢节,只是这几年直播电商的崛起,气氛没有以前那么浓烈了。
那运营关注的指标,比如GMV数据指标,经过数据的采集、清洗、转换、存储、计算、分析这些过程后,最终是如何呈现在大屏幕,并实时更新数据呢
一般获取实时数据常用的四种方式,可以给大家提供参考,轮询、长轮询、长连接和websorket。它们大体可以分为两类,一种是在HTTP基础上实现的,包括短轮询、长轮询、长连接;另一种不是在HTTP基础上实现是,即WebSocket。
轮询:一般指短轮询,基本原理是客户端每隔一段时间向服务端发起HTTP请求,服务端不管有没有数据更新都会立刻返回请求结果。这种方式比较浪费带宽和占用服务端资源,因为数据什么时候更新你不知道,就会造成无效请求,而且随着用户的增多,服务端的压力也随之增大,因此这种方式不适合在线用户数比较大的web应用。
长轮询:客户端向服务端发起HTTP请求,服务端会处于hold状态,如果数据更新返回请求结果,如果数据一直不更新,超出了时间限制才会返回。客户端收到返回结果后立即重新发起HTTP请求,直至下一次结果返回,再次重复。相较于短轮询,长轮询减少了无效请求,但是长时间的连接挂起也会消耗资源。长轮询适用于实时性比较高业务场景,比如web聊天室这一类的即时通讯。
长连接(SSE):全称为Server-Sent Events,SSE与轮询方式类似,也是客户端向服务端发起请求,区别在于一个连接不只是返回一次结果。轮询发起请求建立HTTP连接到响应服务端结果后断开连接,而SSE不会断开连接,当有新的数据更新时,允许服务端推送数据到客户端。SSE的优势很明显,它不需要建立或保持大量的客户端发往服务器端的请求,节约了很多资源,提升应用性能,但是sse只适用于高级浏览器,ie不支持,而轮询浏览器兼容性比较好。
WebSocket:HTML5定义的新协议,与传统的HTTP协议不同,可以在客户端和服务端实现全双工通信。简单来说,首先需要在客户端和服务器端建立起一个连接,这部分需要http。连接一旦建立,客户端和服务器端就处于平等的地位,可以相互发送数据,不存在请求和响应的区别。一些股票行情、在线游戏会采用这种方式
参考资料
https://www.jianshu.com/p/87a6edb34172
https://blog.csdn.net/sugelachao/article/details/124490112
https://blog.csdn.net/UG8064/article/details/101334899