Data Warehouse
文章平均质量分 78
nisjlvhudy
本人稳重、有活力;工作积极主动,认真负责;能吃苦耐劳,勇于克服困难;有团结协作精神及大局观;肯钻研,有较强的实际动手能力
展开
-
数据仓库建设失败的主要原因(鲁百年)
一、国内信息化的现状1、信息化建设的发展历史:在国内信息化建设过程中,基本上是按照当时业务系统的需求进行建设,例如:在一个企业中,财务部门为了减少工资发放的差错,提高发放的效率,先建设一个工资发放和管理程序;为了报账和核对的需求,建设一个财务管理程序;在银行首先为了业务处理的方便,将最基本的手工记帐和处理的业务建成一个系统,过一段时间,如果有新的业务推出,就再建设一个新的系统,或在原系统的原创 2012-07-05 11:12:54 · 3206 阅读 · 0 评论 -
数据仓库建模与ETL的实践技巧
一、数据仓库的架构 数据仓库(Data Warehouse DW)是为了便于多维分析和多角度展现而将数据按特定的模式进行存储所建立起来的关系型DataBase,它的数据基于OLTP源系统。数据仓库中的数据是细节的、集成的、面向主题的,以OLAP 系统的分析需求为目的。 数据仓库的架构模型包括了星型架构与雪花型架构两种模式。星型架构的中间为事实表,四周为维度表,类似星星;而相比较而言,原创 2015-08-01 21:14:34 · 11321 阅读 · 0 评论 -
维度模型数据仓库基础对象概念一览
一、度量、指标、指标器度量和维度构成OLAP的主要概念,对于在事实表或者一个多维立方体里面存放的数值型的、连续的字段,就是度量。这符合上面的意思,有标准,一个度量字段肯定是统一单位,例如元、户数。如果一个度量字段,其中的度量值可能是欧元又有可能是美元,那这个度量没法汇总。在OLAP中还有计算度量的说法,用一个总费用除以用户数,得到每户平均费用。但这究竟还算不算度量了呢?这已经不是原本意义上原创 2015-08-09 09:43:04 · 9727 阅读 · 0 评论 -
数据仓库基础术语名词一览
冰山查询――iceberg query 在数据仓库领域有一个概念叫Iceberg query,中文一般翻译为“冰山查询”。冰山查询在一个属性或属性集上计算一个聚集函数,以找出大于某个指定阈值的聚集值。以销售数据为例,你想产生这样的一个顾客-商品对的列表,这些顾客购买商品的数量达到3件或更多。这可以用下面的冰山查询表示:Select P.cust_ID, P.item_ID原创 2015-08-09 09:36:43 · 5744 阅读 · 0 评论 -
数据仓库分层之辩
--转自:http://blog.itpub.net/post/14877/198599数据仓库的分层可以算是数据仓库架构的子话题。在前段时间参与的一次讨论中,笔者发现其中争论的焦点集中在每一层的作用、特点、是否有必要存在等问题。其中,大家虽然一致提到某些相关概念,但各方的理解却并非完全一致。例如对于ODS是什么、维度建模是什么等问题的解读,都是如此。不妨想想看:数据从分散而异构的数据源中原创 2013-01-31 14:08:26 · 16218 阅读 · 0 评论 -
数据仓库EDW层数据整合集成的思考
比尔*门恩(Bill Inmon)给出了数据仓库这样一个定义,数据仓库是在企业管理和决策中面向主题的、集成的、与时间相关的、不可修改的数据集合。今天单就数据仓库的集成整合特性进行思考,我想数据仓库的集成性大致主要体现在如下几个方面。1、将企业相关IT系统经过面向主题的处理,本身就是一种集成1.1、不同系统、不同业务逻辑的相关数据在各主题的统一1.2、不同系统、相似业务逻辑的相关数据在同原创 2013-01-22 09:07:41 · 9445 阅读 · 1 评论 -
数据仓库建设失败的主要原因
一、国内信息化的现状1、信息化建设的发展历史:在国内信息化建设过程中,基本上是按照当时业务系统的需求进行建设,例如:在一个企业中,财务部门为了减少工资发放的差错,提高发放的效率,先建设一个工资发放和管理程序;为了报账和核对的需求,建设一个财务管理程序;在银行首先为了业务处理的方便,将最基本的手工记帐和处理的业务建成一个系统,过一段时间,如果有新的业务推出,就再建设一个新的系统,或在原系统的原创 2012-12-07 17:44:41 · 2297 阅读 · 0 评论 -
架构设计成就EDW
确保EDW建设成功的因素:拥有明确的业务目标;高级管理层的支持;螺旋式的开发和发布过程;有用户对项目的一贯参与;对数据模型和ETL过程给予足够重视;能够将数据转换成信息和知识;易用性和高可用性等。数据仓库的概念是Bill Inmon 于1991年提出的,Inmon被人们尊称为“数据仓库之父”,他给出了数据仓库的一个简短而全面的定义:数据仓库是一个面向主题、集成、时变、非易失、明细的数据集合,可原创 2012-09-20 10:52:18 · 3424 阅读 · 1 评论 -
数据仓库工作总结(转自CSDN的转载)
1. 概述本文作为我这些年实施数据仓库的总结,如有错误,请各位同仁指正。文档条理不是很清楚,而且也有很多口水话,我不想搞成一个真正的官方文档,所以很随意,符合我的性格。很多问题我只是提出来了,解决方案没有想好,也不知道怎么落到文字,就先提出来备注吧。文档原本想讨论的元数据管理、数据质量和监控工具的内容,由于时间关系,没有添加,以后有空补上吧。1.1.阅读方法本文阅读方式:原创 2012-08-23 10:11:18 · 14433 阅读 · 1 评论 -
数据仓库成功的评价标准
在北京年会上我曾向Sybase公司的卢总监提问过关于数据仓库项目的失败率太高的问题,来表达数据仓库不仅仅是数据存储问题,而是一整套方案和方法论的问题;卢总监的回答是数据仓库的失败率并非80%都是失败的,很多项目介于成功失败之间;数据仓库项目实施周期比较长,不容易看到成果;其次有点像盲人摸象,没人能看清楚商务智能也就是数据仓库整体是如何运作的。现在回想卢总的回答还是很有道理的,因为很大程度上评价转载 2012-08-06 16:52:29 · 2844 阅读 · 0 评论 -
动态数据仓库发展演变的五个阶段
--NCRTeradata事业部首席技术执行官StephenBrobst --战略技术及系统公司首席顾问JoeRarey 最成功的数据仓库都是以循序渐进的方式逐步发展起来的,它的每一次发展都提高了信息的商业价值。近年来,数据仓库已经发展到能支持企业决策,甚至支持企业合作伙伴和客户的新高度。早先,数据仓库只为企业内部高层的某些领域提供战略决策能力,如市场营销、战略策划和财务。数据仓库原创 2012-08-06 16:44:37 · 4802 阅读 · 0 评论 -
转:一位阿里人对数据模型建设的几点思考与总结
走过2010年,回首走过的一年,全部精力投入到了数据平台的建设过程中,在不断的探索、尝试中探索一条适合数据仓库发展之路的数据模型建设方法;作为数据平台建设的主要驱动人,与团队一起完成数据平台基础数据模型(宽表层)的搭建,应用迁移、实现应用项目在新的数据模型上实施。在建设的过程中,有过困惑、走过弯路,但获得了对模型设计方法和理念的体会与沉淀。因此,我更多想对在数据平台建设工作中的历程、困惑、体会做一原创 2015-08-18 20:30:49 · 6717 阅读 · 0 评论