URL触发更新——更敏捷的数据更新触发机制!

在这里插入图片描述
一直以来,BI平台的数据如何保证及时有效地更新,是很多用户关心的问题。通常情况下,对于T+1或其他定期性的数据分析,大多数BI平台,包括观远数据,都会采用定时任务的方式来触发数据更新。这边以观远数据为例,简单进行说明。
场景一:

▶某电商ERP平台需要从业务系统直接抽取数据至BI平台。
由于电商ERP平台白天业务交易繁忙,我们一般会采取凌晨一两点定时
进行前一天增量数据的抽取。

场景二:

▶某便利店客户自建了数仓,需要在每天数据处理完导入数仓后发起BI平台的数据更新。
由于BI平台的数据更新必须等数仓中数据更新完成了以后才能发起,所以必须要选择一个比较合适的数据更新时间点。比如数仓数据更新完成时间是每天7点,那么我们可以把BI平台的数据更新时间选在每天7点10分。

数据仓库(DataWarehouse),一般缩写成DW、DWH。数据仓库是一个面向主题的(Subject Oriented)、集成的(Integrate)、相对稳定的(Non-Volatile)、反映历史变化(Time Variant)的数据集合,用于支持管理决策。
——来自智库百科

定时的数据更新存在弊端

有时候数仓的数据更新并不是每天都能准时完成的。比如,在品牌周年庆、双十一等大型营销活动举办的时候,数据量有可能会暴增,那么原本

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值