Apache Doris 代码仓库地址:apache/incubator-doris 欢迎大家关注加星
数据服务标准:数据结构标准化、在线查询实时化、数据开发可视化。
数据结构标准化
针对数据交互,我们需要提供统一的接口视图,可进行数据的查询、权限管控。
在线查询实时化
针对各业务的调用,我们需要提供指标级数据口径统一的实时数据结果。
数据开发可视化
提供数据接口的可视化统一管理页面,开发人员通过通过可视化管理API,降低接口理解的难度,易于维护
数据服务化
数据服务提供快速将数据表生成数据 API 的能力,通过应用授权,供外部应用系统调用 API 获取数据,且对 API 进行统一管理和发布,支持一键创建数据抽取任务
- 提供向导模式和 SQL 模式,可以通过简单的配置即实现取数 API 的自动构建,屏蔽底层数据源细节,提高数据中台的整体效率
- 提供应用、表和 API 的关系链路,降低运维成本,解耦应用与底层表,提供统一的认证、权限和监控,确保数据应用质量。
- 提供接口开发,调式、参数定义,返回结果说明等开发IDE
数据服务看板
具备 API 使用的监控统计能力,可查看调用次数、调用延时等信息,提供 API 库表和应用的关系查询
可以按照业务主题进行分组,
可以给数据服务设置数据安全等级,对于安全等级较高的服务进行数据访问限流,及审计
数据应用开发通过API配置功能统一创建和发布的API,可以在服务概览页面查看API的调用详情,包括查看不同时间维度下的调用API数量、次数和成功的次数,且能够清晰的查看调用API的Top5和服务调用比例,同时,概览页面提供调用和未调用API列表,若API长时间未被调用或一直未被调用,可考虑下线或者删除
数据服务权限管理
提供统一的认证、权限和监控,确保数据应用质量及数据安全
数据服务可视化开发
这里我们可以可视化的开发数据服务API,进行测试、发布。下线及接口的流控
新建接口
接口查看