![](https://img-blog.csdnimg.cn/20201014180756923.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
IT架构
文章平均质量分 76
Dollnn
这个作者很懒,什么都没留下…
展开
-
大数据ETL简介
1 数据抽取ETL(Extract-Transform-Load)是将数据从来源端经过抽取(extract)、转换(transform)、加载(load)⾄⽬的端的过程。从数据源抽取出所需要的原始数据,经过数据清洗,最终将清洗后的数据加载到数据仓库中去。也称为数据仓库技术。数据抽取是从数据源抽取需要的原始数据,抽取的⽅式多种多样,要根据数据源的特点来确定,通常有如下⼏种数据抽取的⽅式:1、从关系数据抽取数据通常OLTP系统采⽤关系数据库存储业务操作数据,从关系数据库抽取操作型数据是最多⼀种数原创 2021-11-08 09:13:16 · 497 阅读 · 0 评论 -
安装Presto
将安装包解压缩到/opt/module目录下[hadoop@hadoop1 soft]$ tar -zxvf presto-server-0.196.tar.gz -C /opt/module为方便使用,将presto-server-0.196目录名称修改为presto[hadoop@hadoop1 ~]$ mv /opt/module/presto-server-0.196/ /opt/module/presto创建data目录[hadoop@hadoop1 ~]$ mkdir /o.原创 2021-10-31 20:40:27 · 123 阅读 · 0 评论 -
关于元数据与主数据
企业数据管理的内容和范畴通常包含交易数据、主数据以及元数据。以下主要讨论主数据、元数据的概念及应用。主数据和主数据管理的概念企业主数据是用来描述企业核心业务实体的数据,比如客户、合作伙伴、员工、产品、物料单、账户等;它是具有高业务价值的、可以在企业内跨越各个业务部门被重复使用的数据,并且存在于多个异构的应用系统中。企业主数据可以包括很多方面,除了常见的客户主数据之外,不同行业的客户还可能拥有其他各种类型的主数据,例如:对于电信行业客户而言,电信运营商提供的各种服务可以形成其产品主数据;对于航空业原创 2021-10-23 19:31:11 · 296 阅读 · 0 评论