数据服务调研开发

1. 背景调研在7-8月双月okr中,可以看到好多小伙伴的okr内容都提到了数据服务的概念,首先就可以说明这个在数据部门发展过程中是一个必不可少的路径服务化:不同系统之间通过服务方式交互,服务通常以 API 接口形式存在服务化在业务系统中提的比较多,它使业务系统化繁为简,实现业务的拆分,要想搞清楚数据服务解决了什么问题,就要先知道,没有数据服务,我们在日常数据建设中存在哪些痛点数据不知道被哪些应用访问数据存储多份,浪费资源底层数据变更,项目也得跟着改没有统一的管理平台数据不知道被哪些
摘要由CSDN通过智能技术生成

1. 背景调研

在7-8月双月okr中,可以看到好多小伙伴的okr内容都提到了数据服务的概念,首先就可以说明这个在数据部门发展过程中是一个必不可少的路径

服务化:不同系统之间通过服务方式交互,服务通常以 API 接口形式存在

服务化在业务系统中提的比较多,它使业务系统化繁为简,实现业务的拆分,要想搞清楚数据服务解决了什么问题,就要先知道,没有数据服务,我们在日常数据建设中存在哪些痛点

  • 数据不知道被哪些应用访问
  • 数据存储多份,浪费资源
  • 底层数据变更,项目也得跟着改
  • 没有统一的管理平台
数据不知道被哪些应用访问

目前趣头条的数据平台建设中,已经有了元数据平台,包含数据的血缘,数据血缘建立了表与表之间的链路关系,但是在表的末端,我们却不知到表被哪些应用访问,所以应用到表的链路是断的。
当发生大面积异常的时候,往往只能凭借经验来恢复高优任务,甚至是低优任务与高优任务一起恢复的情况,往往会拖长整个恢复过程,影响重要报表的产出

同样在刚刚上线的成本治理中,因为没有应用和表的链路关联关系,我们不敢下线一些零使用的表。

而数据服务打通了数据和应用的访问链路,建立了从数据应用到数据中台数据的全链路数据血缘关系,当任何一个任务出现问题,我们都可以顺着血缘关系,找到这个故障影响了哪些

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值