时光带不走,年少轻狂

按照数据用途划分：根据数据的用途或应用场景，将数据划分为不同的数据域。例如，可以划分为分析域（用于数据分析、挖掘和预测等）、运营域（用于企业日常运营和管理等）和监管域（用于政府监管、合规性检查等）。按照数据来源划分：根据数据的来源或产生渠道，将数据划分为不同的数据域。例如，可以划分为内部数据域（如企业内部的ERP系统、CRM系统等产生的数据）和外部数据域（如市场调研数据、社交媒体数据等）。增强数据安全性：通过数据域划分，可以对不同领域的数据进行权限控制，确保数据的安全性和隐私性。四、数据域划分的注意事项。

离线数仓

一篇文章搞懂mysql常用命令

sql面试题注册用户数，注册用户数下单量

【代码】经典SQL面试题查询比前一天温度高的日期。

面试题，连续登录问题

数据仓库理论知识为什么要分层分层的主要原因是在管理数据的时候，能对数据有一个更加清晰的掌控，详细来讲，主要有下面几个原因：清晰数据结构：每一个数据分层都有它的作用域，这样我们在使用表的时候能更方便地定位和理解。数据血缘追踪：简单来说，我们最终给业务呈现的是一个能直接使用业务表，但是它的来源有很多，如果有一张来源表出问题了，我们希望能够快速准确地定位到问题，并清楚它的危害范围。减少重复开发：规范数据分层，开发一些通用的中间层数据，能够减少极大的重复计算。把复杂问题简单化：将一个复杂的任务分

**数据仓库维度模型设计**维度建模基本概念维度模型是数据仓库领域大师Ralph Kimall所倡导，他的《数据仓库工具箱》，是数据仓库工程领域最流行的数仓建模经典。维度建模以分析决策的需求出发构建模型，构建的数据模型为分析需求服务，因此它重点解决用户如何更快速完成分析需求，同时还有较好的大规模复杂查询的响应性能。维度建模是专门应用于分析型数据库 数据仓库 数据集市建模的方法。数据集市可以理解为是一种"小型数据仓库"。事实表发生在现实世界中的操作型事件，其所产生的可度量数值，存储在事实表中。从

centos7集群时间同步安装NTPyum install ntp ntpdate -y修改配置文件vim /etc/ntp.confserver 0.centos.pool.ntp.org iburst server 1.centos.pool.ntp.org iburstserver 2.centos.pool.ntp.org iburstserver 3.centos.pool.ntp.org iburst改为#server 0.centos.pool.ntp.org ib

centos7 安装CDH6集群环境安装包准备centos7安装包下载使用VMware虚拟机安装centos7克隆虚拟机(至少克隆三台虚拟机) 我的配置(4G内存 8和处理器 100G 硬盘)下载cdh包下载地址:​ https://archive.cloudera.com/cdh6/6.2.1/parcels/​ https://archive.cloudera.com/cm6/6.2.1/redhat7/yum/RPMS/x86_64/[外链图片转存失败,源站可能有防盗链机制,建议将图

hive 行列转换函数行转列 多行合并为一列使用函数：concat_ws(‘,’,collect_set(column))collect_list 不去重collect_set 去重column 的数据类型要求是 string示例:构建测试数据vim row_to_col.txta b 1a b 2a b 3c d 4c d 5c d 6 建表create table tabname(col1 String,col2 String,col3 stirng

Hive 常用函数一, 关系运算符等值比较: =语法: A=B操作类型: 所有基本类型描述: 如果表达式A与表达式B相等,则为TRUE; 否则为FALSEhive> select 1 from tabname where 1=1不等值比较: <>语法: A<>B操作类型: 所有基本类型描述: 如果表达式A为NULL,或者表达式B为NULL, 返回NULL;如果表达式A与B不相等, 则为TRUE; 否则为FALSEhive> select 1 fro

kafka启动命令./bin/kafka-server-start.sh(启动命令) -daemon(后台启动参数) config/server.properties (配置文件)kafka语法查看主题个数 命令 ./bin/kafka-topics.sh --list --zookeeper Hadoop01:2181创建主题 命令 ./bin/kafka-topics.sh --create --zookeeper Hadoop01:2181 --topic first.

SupersetBI VS 报表工具报表工具是数据展示工具，而BI（商业智能）是数据分析工具。报表工具可以制作各类数据报表、图形报表的工具，甚至还可以制作电子发票联、流程单、收据等。BI可以将数据进行模型构建，制作成Dashboard，相比于报表，侧重点在于分析，操作简单、数据处理量大。常常基于企业搭建的数据平台，连接数据仓库进行分析。简介Superset是一款开源的现代化企业级BI。它是目前开源的数据分析和可视化工具中比较好用的，功能简单但可以满足我们对数据的基本需求，支持多种数据源

Spark Local模式安装如何安装步骤：1-准备好已经编译好的spark的软件包2-上传到Linux中，对应目录3-解压对应压缩包tar -zxvf spark.tar.gz -C /export/servers4-配置环境变量当前local环境下仅仅需要配置conf/spark-env.shcp spark-env.sh.template spa...

挂载新的硬盘操作1,1目标给虚拟机增加一块硬盘1.2 路径1,了解 Linux系统分区的原理2,查看系统分区情况3, 虚拟机增加硬盘4, 建立分区5, 格式化分区6, 挂在映射分区7, 设置重启后挂载不失效1.3实现1, 一个硬盘可以分成多个分区用户不能直接操作硬件,需要让硬件和系统的目录建立映射关系 ,这个操作称为挂载2 , 查看系统分区挂载情况# 查看所有设备的...