数据仓库
凯己几
生而不易,何来简单。
展开
-
大数据-数据仓库-概念和分层
文章参考http://ierda.blog.163.com/blog/static/77469587201326105956470/,https://blog.csdn.net/kwu_ganymede/article/details/51367422为什么要对数据仓库分层:a)用空间换时间,通过大量的预处理来提升应用系统的用户体验(效率),因此数据仓库会存在大量冗余的数据;b)如果不分...转载 2019-01-10 22:45:33 · 990 阅读 · 0 评论 -
数据采集中的 全量采集,增量采集,差异采集
内容与下方一样全量备份: 一般是mysql表的数据做每日快照然后全量导入hive中增量备份: 获取每天更新的数据和hive中原有的数据进行合并差异备份:暂时没有遇到,后期遇到就加入说明...原创 2019-02-19 22:29:20 · 6217 阅读 · 0 评论 -
hive中创建关联hbase表的几种方案
作者:Tony_仔 来源:CSDN 原文:https://blog.csdn.net/qq_31598113/article/details/80181843 版权声明:本文为博主原创文章,转载请附上博文链接! 【运行环境】hive-1.2.1 hbase-1.1.2【需求背景】有时候我们需要把已存在Hbase中的用户画像数据导到hive里面查询,也就是通过hive就...转载 2019-02-27 13:20:00 · 1267 阅读 · 0 评论