粤磊 informatica powercenter学习笔记(十一)

本文探讨了BI项目中源数据到Informatica Server的数据传输优化策略。重点介绍了如何通过调整源数据结构、使用预处理SQL以及避免业务高峰期进行数据抽取等方式提高传输效率。

         INFORMATICA  的调优之二   源数据到INFORMATICA SERVER传输优化

 

一般BI项目架构中,源数据到INFORMATICASERVER的连接都是在企业内部网中实现的,这样网络带宽的因素一般没有问题的(如果是存在走INTERNET的,则需考虑光纤或专线保证带宽),那么制约源数据到INFORMATICASERVER传输的有两个因素,一个是源数据是怎么放的,另一个是INFORMATICA怎么去拿的。

对于源数据的存放,在优化一中也有提及,SOURCE OWNER对源数据的规范很重要,在源数据存放已定情况下,就需考虑INFORMATICA   怎么去拿的问题,在INFORMATICA中,WORKFLOW运行时走的是NATIVE DRIVER。因此C/S模式的连接速度还是可以的,连接没问题的同时,需要考虑抽取源的SQL了,如果源是RDBMS,就需要考虑是否需要OVERVIDE PRESQL了,OVERVIDE可以根据源数据的具体数据结构判定是否需要加HINT之类的,另外根据性能需要可以在PRESQL里做些抽取前的预处理,这两项根据实际环境有效应用对提升传输数据性能还是比较有效的,另外需要注意的是每个源数据(应该对应的OLTP业务系统DB)都有自己的特点,我们再做抽取时尽量避开源数据应用高峰。(当然如果是ODS系统,需要适时抽取,可以考虑 借助物化视图及流技术来实现,不属于INFORMATICA范畴,呵呵,不过老白的DBA优化日记中详细提到过借助物化视图及流技术来实现OLTPDBODSDB的抽取优化,在此向老白同志致敬)

来自 “ ITPUB博客 ” ,链接:http://blog.itpub.net/22377317/viewspace-687509/,如需转载,请注明出处,否则将追究法律责任。

转载于:http://blog.itpub.net/22377317/viewspace-687509/

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值