BI
文章平均质量分 92
浪菜叶
数据仓库实践者
展开
-
Informatica Power Center Server 在 Vista 中不可见
Description: 在Vista中安装Informatica的时候,只有Client和ODBC。Solution: 右键点击PowerCenter目录下的setup.exe,兼容性标签里,Compatibility mode, check "Run this program in compatibility mode for:",下面选择Windows XP (Service Pack原创 2009-01-06 14:00:00 · 610 阅读 · 0 评论 -
Informatica Bug
<br />使用工具:PowerCenter Designer<br />版本:Designer Version 8.6.1 HotFix10 01 24 412 (R179 D88)<br />平台:Citrix Web Interface<br />Bug:<br />1、Mappings->Parameters and Variables...和Union [Group Ports]里Port Name粘贴未双击时,显示已改变,但偶尔失效。<br />2、Union [Group Ports]连线后顺原创 2010-11-25 16:20:00 · 741 阅读 · 0 评论 -
Informatica Best Practeces for ICC
ICC的意思我总是记不住。老外好像蛮喜欢搞这些概念性的东西,叫的名字一个比一个好听。我只谈论一下我对ICC粗浅的理解。 所谓整合的东西,在这里就是提供了一些标准。包括命名规则等等。 mapping里其实是不提倡override任何东西的。尤其是sql override这种其实很好用的尴尬功能。因为写sql真的很方便,但sql是基于特定数据库的。出于将来对不同数据库迁原创 2011-06-28 16:49:00 · 822 阅读 · 0 评论 -
informatica里关于通过repository数据库直接进行检查的语句
用来检查批量某个参数缺省值,长度等属性的脚本:select t2.subj_name,t1.mapping_name,t0.pv_name,t0.pv_default from opb_map_parmvar t0,opb_mapping t1,opb_subject t2 WH原创 2011-07-13 14:07:07 · 1363 阅读 · 0 评论 -
维度建模技巧总结
全局架构上:一套全局的metadata管理框架。ODS的考量可以容后,架构在数据源系统之后或者数据仓库内的一个特殊组成部分。 Dimension Table(占10%空间):主键使用代理键(surrogate key)。非范式化,扁平化层级关系。存储可原创 2010-12-08 16:06:00 · 1280 阅读 · 0 评论 -
Informatica Notes
InstallationThe domain configuration and the Model repository cannot be in the same database schema.原创 2012-04-23 14:29:48 · 449 阅读 · 0 评论 -
数据仓库工具箱——维度建模(Dimensional Modeling)摘要(一)
文章本身就是《数据仓库工具箱——维度建模的完全指南(第二版)》(The Data Warehouse Toolkit. Second Edition)的摘要,只希望能尽量简洁和易读……第一部分主要介绍数据仓库的框架和几个基本概念。原创 2010-11-28 10:21:00 · 2991 阅读 · 0 评论 -
数据仓库工具箱——维度建模(Dimensional Modeling)摘要(二)
几乎每一段都是一条维度模型设计的方法、建议或准则。原创 2010-12-06 16:57:00 · 1937 阅读 · 0 评论 -
Kylin权威指南没说清楚的事情——读《Kylin权威指南》后的一些思考和笔记
1. 引言读《Kylin权威指南》后的一些思考和笔记。2. 关于维度2.1 维度表太大怎么办?维度表会被加载到内存里,但前提是小于300M。互联网公司往往会有大维表,比如用户表,这时候正常构建会失败。对于这种类型的维表,早期有建议在Hive中事先把维度做到事实表里,现在只需要在Model的Dimension里把“Skip snapshot for this lookup ta...原创 2019-05-20 23:34:51 · 560 阅读 · 0 评论 -
大数据环境下数据仓库的实践(三)—— 数据仓库的组成部分
数据仓库从全局来看会涉及到四大块:业务源系统、ETL系统、数据应用层、数据消费层。业务源系统数据仓库中数据的来源是各个业务源系统。严格说来业务源系统不属于数据仓库的范畴。但是如果业务系统模型设计不好,对后续的数据处理将极为不利,甚至会极大的增加数据仓库建设的投入成本。现状往往是业务系统的设计人员水平参差不齐,业务系统设计千奇百怪,甚至缺乏第三范式的考量,缺乏基本的审计字段(cre...原创 2019-05-26 19:16:38 · 1035 阅读 · 0 评论 -
数据仓库工具箱——维度建模(Dimensional Modeling)摘要(三)
几乎每一段都是一条维度模型设计的方法、建议或准则。原创 2011-01-04 11:31:00 · 1361 阅读 · 0 评论 -
"CMN_1552: Error accessing lookup cache." when running a PowerCenter session with large lookup tables
Problem DescriptionThe session crashes and generates a core file when building the lookup cache for lookup tables that have large amounts of data. The error is seen when the lookup table contains millions of records.CMN_1552: Error accessing lookup cache.转载 2010-10-22 09:45:00 · 7625 阅读 · 0 评论 -
Informatica PowerCenter Repository Manager 连接报错
第一次用Informatica PowerCenter Repository Manager连接Repository时,RepositoryGuide误导如下:输入用于创建资料库得数据库用户名和密码。结果得到报错:[REP_57060] Login failure. The user xxx does not exist in the repository XXX后尝试Administ原创 2009-01-06 21:03:00 · 2947 阅读 · 0 评论 -
Informatica 的端口问题
这里的端口有点多,说起来有点绕。但目前只围绕Informatica Server服务项的启动进行讨论。 Informatica Repository Server Setup里头涉及到两类port一般默认情况Server Port Number: 5001Repository里头Minimum Port Number: 5002Maxmum Port Number: 655原创 2009-01-07 16:15:00 · 6074 阅读 · 1 评论 -
Dimension Modeling Digest
The data warehouse must make an organizations information easily accessible.The data warehouse must present the organizations information consistently.The data warehouse must be adaptive and res转载 2010-03-31 14:28:00 · 621 阅读 · 0 评论 -
Flatten hierarchyid in SQL Server 2008
在SQL Server 2008中引入了hierarchyid来处理树状结构。下面简单就以AdventureWorks(无hierarchyid)和AdventureWorks2008(有hierarchyid)里的HumanResources.Employee为例,来说明一下在新的hierarchyid中如何进行flat化的dimension抽取。AdventureWorks是微软为SQL原创 2010-05-21 10:06:00 · 443 阅读 · 0 评论 -
OBIEE
<br />Initialization Block:<br />SELECT LANG_ID <br />FROM D1_LANG <br />WHERE LANG_ID = 'VALUEOF(NQ_SESSION.WEBLANGUAGE)'<br /> <br />Here "NQ_SESSION.WEBLANGUAGE" is the system variable. What else exists in NQ_SESSION?<br />原创 2010-07-29 11:21:00 · 86 阅读 · 0 评论 -
REP_61082
<br />[REP_61082] AdminConsole's code page (MS Windows Latin 1 (ANSI), superset of Latin1) is not one-way compatible to repository xxxx...<br />通过修改注册表:设置HKEY_LOCAL_MACHINE-->SYSTEM-->CurrentControlSet-->Control-->Nls-->CodePage-->ACP 的值为20127<br />restart原创 2010-08-03 14:27:00 · 2972 阅读 · 2 评论 -
Kimball University: The 10 Essential Rules of Dimensional Modeling
Follow the rules to ensure granular data, flexibility and a future-proofed information resource. Break the rules and you'll confuse users and run into data warehousing brick walls.转载 2010-08-03 16:06:00 · 587 阅读 · 0 评论 -
copy a reusable transformation as non-reusable transformation
Informatica TransformationReusableNon-reusable原创 2010-09-01 13:06:00 · 395 阅读 · 0 评论 -
Informatica Incremental load Strategy
ETL, incremental load, version_number原创 2010-09-03 12:31:00 · 887 阅读 · 0 评论 -
大数据环境下数据仓库的实践(四)—— 主题域的划分及任务和工作流的组织方式
主题域的划分由于数据仓库跨部门,所以必然存在某些数据关系密切,而某些数据相互比较独立。于是相关的一组数据往往被划成一个个主题域。主题域是为了更好地组织数据仓库。我们以一个普通的买卖为例,这里的主题域可以划分为:卖家(商家)、买家(客户)、商品、交易等。每个域下面还可以根据业务的复杂程度设置自己的子域,例如交易域下还可以设置正向交易、逆向交易(退款)。主题域和维度的迷惑主题域和维度经常容易被...原创 2019-06-07 11:10:51 · 4127 阅读 · 0 评论