powercenter
iameyama
我不去想是否能够成功,既然选择了远方,便只顾风雨兼程
展开
-
infa结构讲解
infa内购构成结构图 reposition agent 是infa自己的系统内部进行,每建立一个资料库,系统则启动一个agent进行 一旦agent启动后,服务器则将控制权限交给agent管理,它是多进程的,多以我们可以进行多用户的开发。 session是每次任务启动的时候都去资料库去读取新的数据。所以修改规则就是你修改mapping条件的时候。无需在编译。 有时候mapping的修改和可能造成session的失效。你在执行任务的时候,会发现sessio...原创 2020-10-11 21:45:39 · 3944 阅读 · 0 评论 -
infa 组件学习总结----joiner,fx,sorter,aggregato四个组件综合使用。
正常的使用顺序1,先用joiner抽取相应的数据。2,再用fx将相应的数据进行类型转换3,排序4,汇总计算,3用的什么字段排序的,就选用那几个字段作为key进行group by,效率最高5,插入目标数据库...原创 2020-10-12 21:17:14 · 243 阅读 · 0 评论 -
optimizing mappings 调优mapping
尽量减少transformations 和expressions的使用 删除不必要的links 在读取flat file的时候设定尽量只是读取需要的分隔符,比如只是读取分隔符都好,不读取单引号,双引号。xml文件中尽量减少标识。 数据开销大小排序Date》String》Integer...原创 2020-10-11 22:02:34 · 99 阅读 · 0 评论 -
PWC服务器端的配置
原创 2020-10-13 22:27:12 · 142 阅读 · 0 评论 -
infa 组件学习总结----joiner
关联分类1,同构 同一个数据库类型,比如两个表都是oracle或者都是db2,这个可以用source qualifier来实现。2,异构,数据源是1,两个文件 2,不同数据库db2和oracle 3,数据库和文件这些都是异构的,一般sql的话,我们一般都导入到同一个数据库中比如都导入到oracle。这个只能用joiner来实现....原创 2020-10-12 21:17:20 · 426 阅读 · 0 评论 -
infa 组件学习总结----filter
起到过滤数据的作用。尽可能的在source qualifier中用where进行过滤。但是也可以用这个filter来进行过滤,不同的是1,他的处理是在infa的缓存中进行。2,他也可以进行文件数据的过滤,sq不可以。使用方法...原创 2020-10-11 22:02:25 · 187 阅读 · 0 评论 -
infa 组件学习总结----aggregator
特点比sql功能会更强大一些作业方法最大特点1,不做汇总,不做group by的字段也是可以放到目标表的,这时它是group by中的同一个组的最后一个数据。这个功能在sql中是无法实现的。2,infa还提供一个conditional的功能,就是有条件的汇总,有个这个功能就可以做一个复杂的条件的汇总功能。3,只有保证传进来的数据是排序的才选中 sorted input这个选项,可以大大提高效率,否则不选择。...原创 2020-10-12 21:17:26 · 379 阅读 · 0 评论 -
目标数据target,经常遇到问题,调优
经常遇到问题1,2,3,4,原创 2020-10-11 22:03:09 · 233 阅读 · 0 评论 -
infa 组件学习总结----source qualifier
作用起到抽取数据的作用.尽可能的在这个地方将数据截取住,减少后期数据的处理量,提高系统的效率.1,sql query这个地方可以些sql的where条件,尽可能的将数据截取,这之后处理就进入到了缓存中,无法在使用where条件,只能用filter点击【sql文的生成】按钮,可以自动生成sql,默认是不显示的。...原创 2020-10-11 22:03:01 · 249 阅读 · 0 评论 -
infa 组件学习总结----sorter
功能1,排序作业方法应用技巧排序的字段都是升序或者都是降序的话,效率是最高的。排序的优势排号顺序后,交给下一个组件的话,效率会提高。比如sum 那几个字段在这里做了排序,在下一个组件sum汇总就作为group by的字段,顺序也要一样。在进行相应的汇总函数,也是sorter的那几个字段,这样的效率是最高的。sorter的特点1,排序组件时占用内存的2,有一个缺省的占用内存的大小为8m3,cache的大小设定计算公式 排序字段每个字节...原创 2020-10-12 21:17:35 · 447 阅读 · 0 评论 -
infa中文件源的抽取
一般文件源都放到服务器的下面的目录中,$informatica_home/......../server/SrcFiles原创 2020-10-11 21:11:40 · 149 阅读 · 0 评论 -
informatica工作经验总结
1,在mapping中设计变量的时候最好都设定为string类型,否则如果日期设定为date/time类型,在后面的使用中容易出现错误。原创 2020-10-18 15:58:29 · 267 阅读 · 0 评论 -
INFA学习知识点总结
infa中些的纯sql是运行在数据库中的不是在infa中运行在有过滤的情况下,尽可能的先把数据过滤掉,这样可以提高效率tempdb是join等使用的时候,db产生的一个临时表原创 2020-10-11 22:02:44 · 177 阅读 · 0 评论 -
infa组件介绍----------source qualifier
作用1,主要做一些行级别的转换,基本不可缺少. 功能详解 编写sql语句 调用存储过程,可以设定先执行存储过程,在使用sql原创 2020-10-11 22:02:01 · 431 阅读 · 0 评论 -
INFA学习中遇到到英文单词
transformation传输,转换qualifiern.合格者;修饰语;预选赛原创 2020-10-11 14:14:57 · 81 阅读 · 0 评论 -
PWC全环境配置总结
PWC服务器端配置 需要配置内容 存储库服务 集成服务原创 2020-10-13 22:30:14 · 359 阅读 · 0 评论 -
INFA学习知识点总结
infa中些的纯sql是运行在数据库中的不是在infa中运行在有过滤的情况下,尽可能的先把数据过滤掉,这样可以提高效率tempdb是join等使用的时候,db产生的一个临时表有些功能infa能实现的db也是可以实现的,具体放到哪一个部分去实现。要具体情况具体分析。效率也是相仿的,比如sorter这个和db的效率是没有什么区别的。可以大胆使用。infa组件的分类Passive transformation 数据行数不改变。比如expression transformati..原创 2020-10-12 21:17:29 · 2341 阅读 · 0 评论 -
infa组件介绍----------expression transformation 表达式
作用1,字段级别的计算,加减乘除等功能1,I 输入O 输出V 变量定义,局部变量,定以后,可以在使用.临时存储的作用.原创 2020-10-11 22:01:44 · 248 阅读 · 0 评论 -
mapping做成时的小技巧
mapping做成时的小技巧原创 2022-03-22 09:57:48 · 534 阅读 · 0 评论 -
onedrive从新更新的方法步骤,操作错误,容易导致服务器的文件全部被删除。这个的操作和vsn有些不同
1,电脑onedrive的图标,右击 设定2,同期停止3,onedrive同步目录从新设定。原创 2022-02-21 15:05:11 · 1852 阅读 · 0 评论 -
PWC测试case的做成
case01主要内容为前处理中delete,Truncate是否正确实施case02表之间的逻辑处理,各种抽出数据条件,结合条件等是否正确实施case03插入表的项目的单纯设定是否被正确的设定case04插入表的项目的型变换,文字加工,日期计算,条件式,计算式,集计,固定值是否被正确设定case05插入表的必须项目以外的项目是否可以设定为null的确认case06插入表的项目允许范围内设定的最小值是否可以正确设定case07插入表的项目允许范围内设定的最大原创 2022-02-03 22:49:11 · 415 阅读 · 0 评论 -
mapping 做成手顺
前期确认事项1,m·_Phigical Name 作为 Mapping名App ID 作为资源的配置先数据源和数据先的导入2,mapping 的做成WorkFlow做成原创 2022-02-03 22:36:41 · 346 阅读 · 0 评论 -
PWC资料
https://docs.informatica.com/ja_jp/data-integration/data-services/10-2/_installation-and-configuration-guide_data-services_10-2_ditamap/GUID-C1BF721C-877C-4029-B1D8-0D8D24D8E9A0/GUID-167933E1-DC85-4CA0-8713-0203DDA94A9B.html https://kb.informatica.com/pro原创 2020-10-13 22:29:57 · 1387 阅读 · 0 评论