![](https://img-blog.csdnimg.cn/20210424211742876.png?x-oss-process=image/resize,m_fixed,h_224,w_224)
ETL
文章平均质量分 85
做ETL的一些经验
Colin_lqk
ETL,数据分析,大数据,数据仓库,Hadoop
展开
-
ETL的过程原理及数据仓库建设
一、 数据仓库建设 数据仓库建设中的ETL(Extract, Transform, Load)是数据抽取、转换和装载到模型的过程,整个过程基本是通过控制用SQL语句编写的存储过程和函数的方式来实现对数据的直接操作,SQL语句的效率将直接影响到数据仓库后台的性能。 目前,国内的大中型企业基本都具有四年以上计算机信息系统应用经验,积累了大量可分析的业务数据,这些信息系统中的数据需要通过搭建数据仓库平台才能得到科学的分析,这也是近几年数据仓库系统建设成为IT领域热门话题的原因。 二、优化的思路分析 数据仓库ETL原创 2021-01-12 13:24:40 · 1930 阅读 · 0 评论 -
数据仓库建模和ETL实践技巧
一、数据仓库的架构 数据仓库(Data Warehouse DW)是为了便于多维分析和多角度展现而将数据按特定的模式进行存储所建立起来的关系型数据库,它的数据基于OLTP源系统。数据仓库中的数据是细节的、集成的、面向主题的,以OLAP系统的分析需求为目的。 数据仓库的架构模型包括了星型架构与雪花型架构两种模式。星型架构的中间为事实表,四周为维度表,类似星星;而相比较而言,雪花型架构的中间为事实表,两边的维度表可以再有其关联子表,从而表达了清晰的维度层次关系。 从OLAP系统的分析需求和ETL的处理效率两方面原创 2021-01-12 12:04:13 · 299 阅读 · 1 评论