剑指数据仓库-项目篇
提供开源项目,编写shell脚本,使用rundeck进行调度,最终效果展示在Superset上
优惠券已抵扣
余额抵扣
还需支付
¥9.90
¥99.00
购买须知?
本专栏为图文内容,最终完结不会低于15篇文章。
订阅专栏,享有专栏所有文章阅读权限。
本专栏为虚拟商品,基于网络商品和虚拟商品的性质和特征,专栏一经购买无正当理由不予退款,不支持升级,敬请谅解。
Spark on yarn
这个作者很懒,什么都没留下…
展开
-
剑指数据仓库-项目篇(五)
一、进行指标计算2.1、案例:抽取数据过程中遇到的问题2.2、如何在ADS层做指标计算2.3、分组求TopN2.4、Hive的行转列&&Dbeaver数据导出三、部署Rundeck遇到的问题(Linux的OOM机制)一、进行指标计算使用SQOOP把Hive中ads_bill_sum_count这张表的数据导入到MySQL中dw数据库中的ads_bi...原创 2020-05-04 12:20:08 · 585 阅读 · 0 评论 -
剑指数据仓库-项目篇(四) - DWS层&&ADS层指标计算
一、项目回顾二、数仓的各项理论知识2.1、什么是数据仓库2.2、数仓分层-星型模型2.3、数仓分层-雪花模型2.4、数仓分层-星座模型三、ERP项目架构3.1、数仓分层流程图一、项目回顾https://blog.csdn.net/SparkOnYarn/article/details/105454067二、ODS --> DWD层是怎么做的选择ruozeda...原创 2020-04-12 20:57:54 · 3310 阅读 · 0 评论 -
剑指数据仓库-项目篇(三) - 数据建模的三种模型&&ods层到dwd层介绍
一、上次课回顾二、数仓的各项理论知识2.1、什么是数据仓库2.2、数仓分层-星型模型2.3、数仓分层-雪花模型2.4、数仓分层-星座模型三、ERP项目架构3.1、数仓分层流程图一、上次课回顾https://blog.csdn.net/SparkOnYarn/article/details/105430370主要讲了ERP的一些模块(基础信息维护、采购、销售、零售流程维...原创 2020-04-11 20:50:06 · 4833 阅读 · 0 评论 -
剑指数据仓库-项目篇(二) - 数仓的各项理论知识&&订单表设计案例
一、上次回顾二、数仓的各项理论知识2.1、什么是数据仓库2.2、基础资料2.3、商品管理2.4、采购管理2.5、销售管理2.6、零售管理三、ERP系统核心-仓库一、上次回顾https://blog.csdn.net/SparkOnYarn/article/details/105388526简单回顾:基础资料、商品类别(SKU)、供应商、商家+用户、采购流程、销售 仓库 ...原创 2020-04-10 16:11:23 · 805 阅读 · 0 评论 -
剑指数据仓库-项目篇(一) - ERP系统各个模块介绍&&系统的核心-仓库
一、ERP系统安装部署二、ERP系统各个模块介绍2.1、系统管理2.2、基础资料2.3、商品管理2.4、采购管理2.5、销售管理2.6、零售管理三、ERP系统核心-仓库一、ERP系统安装部署https://blog.csdn.net/SparkOnYarn/article/details/105368283二、ERP系统各个模块介绍2.1、系统管理用户、角色、权限...原创 2020-04-08 23:00:11 · 664 阅读 · 0 评论 -
剑指数据仓库-ERP项目环境准备
一、下载IDEA+Maven安装包二、IDEA安装+激活三、Maven安装+配置阿里云镜像四、IDEA导入ERP项目+初始化DB脚本+本地运行一、下载IDEA+Maven安装包1、IDEA下载https://blog.csdn.net/weixin_42032199/article/details/96601459网上自行下载处理后进行安装2、Maven下载http://m...原创 2020-04-08 15:11:58 · 301 阅读 · 0 评论