![](https://img-blog.csdnimg.cn/20201014180756925.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
BI/DW
扫大街的程序员
爱思考、爱沟通、爱review、爱总结、爱读史记、爱跑步、还爱翻墙
展开
-
浅谈数据仓库的基本架构
目录[-]1、数据仓库的数据来源2、数据仓库的数据存储3、数据的聚合4、多维数据模型5、业务模型6、数据仓库的数据应用7、报表展示8、即席查询9、数据分析10、数据挖掘11、元数据管理12、一种Hadoop多维分析平台的架构13、Refer 数据仓库的目的是构建面向分析的集成化数据环境,为企业提供决策支持(Decisio转载 2014-01-12 14:07:31 · 1425 阅读 · 0 评论 -
最佳日志实践
前言日志用来记录用户操作、系统运行状态等,是一个系统的重要组成部分。然而由于日志并非系统核心功能,通常情况下并不受团队的重视。在出现问题需要通过日志来定位时,才发现日志还存在很多问题。日志记录的好坏直接关系到系统出现问题时定位的速度,同时可以通过对日志的观察和分析,提前发现系统可能的风险,避免线上事故的发生。我们在开发和运维NOS(网易对象存储,Netease Object Sto转载 2014-01-15 11:48:41 · 1166 阅读 · 0 评论 -
以主题域规划DW
以主题域规划DW 主题域包含了某方面决策者关注的事物。一个主题域通常会覆盖多个业务部门,例如产品主题域涉及到销售、财务、物流、采购等部门。主题域下包括了主题,例如产品主题 域中包括成本、发运、库存等主题。主题域模型是对业务模型的抽象,需要从决策者和管理者的角度反映企业业务模型。决策者不需要了解每个部门详细的业务细节;销售部门的管理者需要知道产品的库存转载 2014-02-15 23:10:13 · 5892 阅读 · 0 评论 -
大型数据仓库的治理(2)- 数据质量不可靠
文/通贯【导读】数据仓库治理系列文章,本文是第二篇,你可以回复数据仓库(当然需要先关注微信号alibabatech)查看整个系列。作者从实际经验中,总结出了一些大型数据仓库治理中,可能会遇到的问题。本文谈到了“数据质量不可靠”的问题,大数据时代,你值得关注。 对于程序员来说,最头疼的就是听到:“大兄弟,你这个程序有BUG吧”,那么对于数据开发人员来说,最转载 2014-03-12 17:25:27 · 1268 阅读 · 0 评论 -
大型数据仓库的治理(4)-数据安全不可控
文/通贯【导读】这是共四篇的数据仓库治理系列,本文是第四篇,回复数据仓库可查看整个系列。作者从实际经验中,总结出了一些大型数据仓库治理中,可能会遇到的问题。本文谈到了“数据安全不可控”的问题,大数据时代,你值得关注。 此前数据安全的攻防重点都在业务系统上,对外要防止黑客攻击,防止其获取业务系统管理员身份盗取机密数据,或者防止其进入数据库大批量导出数据;对转载 2014-03-12 17:27:02 · 2590 阅读 · 0 评论 -
大型数据仓库的治理(3)-维护成本高
文/通贯【导读】数据仓库治理系列文章,本文是第三篇,你可以回复数据仓库(当然需要先关注微信号alibabatech)查看整个系列。作者从实际经验中,总结出了一些大型数据仓库治理中,可能会遇到的问题。本文谈到了“维护成本高”的问题,大数据时代,你值得关注。 随着大数据时代的来临,数据的作用不再仅限于辅助运营决策,已经发展成为基本生产资料,融入到每个业转载 2014-03-12 17:26:25 · 984 阅读 · 0 评论 -
关于数据仓库建议、感想
现代数据仓库之父,William H.Inmon大师的著作:《数据仓库(Building the Data Warehouse)》定义:数据仓库是:面向主题的、集成的、稳定的、面向时间的数据集合。数据平台之问需求响应慢数据质量不可靠数据不一致上下游出错统计方式哥们,你真的算错了数据不可信准确,可靠,拍着胸口没问题,你就是标准,金字招牌。维护成本高数据原创 2014-03-16 08:42:54 · 2006 阅读 · 0 评论 -
大型数据仓库的治理(1)- 数据需求响应慢
文/通贯 【导读】这是共四篇的数据仓库治理系列,本文是第一篇。作者从实际经验中,总结出了一些大型数据仓库治理中,可能会遇到的问题。本文谈到了“数据需求响应慢”的问题,大数据时代,你值得关注。 数据仓库是继ERP之后失败率最高的IT项目。在项目还没立项的时候,会给老板呈现各种美好。而实施到一定阶段的时候,老板会发觉太多的华而不实,要什么没什么,做点变更比造航转载 2014-03-12 17:23:54 · 1231 阅读 · 0 评论