1、数据仓库服务架构
数据仓库服务(Data Warehouse Service),下面简称DWS 。主要为客户提供数据存储,数据挖掘,数据分析等功能。其内核采用开源的关系数据库管理系统Postgres SQL加以定制开发。服务部署在集群上,集群有3~32个虚拟主机组成。用户使用DWS集群的请求处理流程如下:
1.1、用户通过客户端,例如chrome,IE,FireFox等浏览器登录DWS界面,对应于下图中的1。
1.2、用户对DWS集群做了一个操作,比如重启,对应于下图中的2。
1.3、Nginx根据调度策略将重启请求下发到某一个console节点上,对应于下图中的3.
1.4、Console节点将请求通过HAproxy根据某种调度策略,将请求下发到service节点上,对应于图中的4。
1.5、service节点处理重启任务,并更新数据库中相关表的记录,对应于图中的5,并返回处理结果。
其它节点功能说明:
1.6、monitor节点:监控集群的状态。
1.7、billing节点:计费。
1.8、OM Sevice节点(insight):运维节点,一些运维操作会通过该节点下发到service节点上。
1.9、DB节点:数据库节点,一主一备。
2、可靠