大数据
文章平均质量分 54
大数据组件搭建,数据分析处理,算法
意林飞笑
这个作者很懒,什么都没留下…
展开
-
数仓分层理论和应用
一、数据分层概念及用途 1.数据运营层:ODS(Operational Data Store),数据来源经过ETL存入hive后就是ODS层。 2.数仓:ODS经过按照主题建立各种数据模型,细分如下: 1)数据明细层:DWD(Data Warehouse Detail),按照业务处理方式将各个专业数据进行集中,保证数据完整性和质量。 2)数据中间层:DWM(Data WareHouse Middle),对DWD层的生产数据进行轻度综合和汇总统计,面向分析型应用对数据进行细粒度沉淀,保留的维度较多。 3)数据原创 2021-07-29 21:21:43 · 313 阅读 · 0 评论 -
安装mysql 和hive
1.下载mysql wget 'https://dev.mysql.com/get/mysql57-community-release-el7-11.noarch.rpm' 2.安装mysql rpm -Uvh mysql57-community-release-el7-11.noarch.rpm yum install -y mysql-community-server 3.设置免密登录mysql vim /etc/my.cnf skip-grant-tables=1 system...原创 2021-02-28 00:08:55 · 93 阅读 · 0 评论