首先,先看看整体的架构图
从架构图来看,很清晰的可以看到数据架构可以分为数据采集层、数据计算层、数据服务层、数据应用层。
-
数据采集层
- 日志采集:
Web端:Aplus.JS
APP端:UserTrack - 数据传输:TimeTunnel
- 数据同步:DataX
- 日志采集:
-
数据计算层
- 数据存储及计算云平台(离线和实时)
- 数据整合及管理体系(OneData)
-
数据服务层
OneService:以数仓整合计算好的数据为数据源,对外通过接口的方式提供数据服务。如简单数据查询、复杂数据查询、实时数据推送 -
数据应用层