数据库数据采集总结

一个理想原则：

1、经常变动的信息，应该通过埋点/日志的方式作为用户行为的一部分

2、不经常变动的信息，可以导入进来作为维度表

为什么需要采集数据库的数据?

  1.理想情况下，对数据库数据的变更都可以在日志中提现

  问题：

缺少历史状态

采集任务的负载会影响线上业务

采集内容：

用户行为

用户行为相关实体补充

用户表

订单表

商户表

商品表...