离线数仓
文章平均质量分 85
离线数仓
工藤-新二
自由与爱
展开
-
Azkaban部署
文章目录第1章 Azkaban部署1.1 集群模式安装1.1.1 上传tar包1.1.2 配置MySQL1.1.3 配置Executor Server1.1.4 配置Web Server第1章 Azkaban部署1.1 集群模式安装1.1.1 上传tar包1)将azkaban-db-3.84.4.tar.gz,azkaban-exec-server-3.84.4.tar.gz,azkaban-web-server-3.84.4.tar.gz上传到hadoop105的/opt/software路径[原创 2021-02-04 14:37:27 · 269 阅读 · 0 评论 -
大数据电商离线数仓项目-下篇
文章目录第5章 数仓搭建-DWS层5.1 业务术语5.2 系统函数5.2.1 nvl函数5.2.2 日期处理函数5.2.3 复杂数据类型定义5.3 DWS层5.3.1 每日设备行为5.3.2 每日会员行为5.3.3 每日商品行为5.3.4 每日活动统计5.3.5 每日地区统计5.4 DWS层数据导入脚本第6章 数仓搭建-DWT层6.1 设备主题宽表6.2 会员主题宽表6.3 商品主题宽表6.4 活动主题宽表6.5 地区主题宽表6.6 DWT层数据导入脚本第7章 数仓搭建-ADS层7.1 新数据生成7.2 设原创 2021-02-04 10:05:32 · 770 阅读 · 2 评论 -
大数据电商离线数仓项目-上篇
文章目录第1章 数仓分层1.1 为什么要分层1.2 数据集市与数据仓库概念1.3 数仓命名规范1.3.1 表命名1.3.2 脚本命名1.3.3 表字段类型第2章 数仓理论2.1 范式理论2.1.1 范式概念2.1.2 函数依赖2.1.3 三范式区分2.2.1 关系建模2.2.2 维度建模2.3 维度表和事实表(重点)2.3.1 维度表2.3.2 事实表2.4 数据仓库建模(绝对重点)2.4.1 ODS层2.4.2 DWD层2.4.3 DWS层2.4.4 DWT层2.4.5 ADS层第3章 数仓搭建-ODS层原创 2021-02-04 09:54:36 · 1824 阅读 · 0 评论 -
DataGrip安装及使用
文章目录第1章 datagrip安装第2章 datagrip激活第3章 datagrip连接Hive客户端第4章 常用配置第1章 datagrip安装1)双击datagrip-2020.1.5.exe2)进入欢迎页面,点击next3)是否卸载旧的版本 4)修改安装路径5)后面所有步骤,一路下一步,直到完成。第2章 datagrip激活激活方法和激活idea方法一致。第3章 datagrip连接Hive客户端1)启动datagrip后的初始页面2)连接hive客户端原创 2021-02-03 10:07:21 · 8887 阅读 · 9 评论