ITPub博客

首页 > Linux操作系统 > Linux操作系统 > 粤磊 informatica powercenter学习笔记(十一)

粤磊 informatica powercenter学习笔记(十一)

原创 Linux操作系统 作者:vzyuelei9 时间:2011-02-18 15:35:32 0 删除 编辑

         INFORMATICA  的调优之二   源数据到INFORMATICA SERVER传输优化

 

一般BI项目架构中,源数据到INFORMATICASERVER的连接都是在企业内部网中实现的,这样网络带宽的因素一般没有问题的(如果是存在走INTERNET的,则需考虑光纤或专线保证带宽),那么制约源数据到INFORMATICASERVER传输的有两个因素,一个是源数据是怎么放的,另一个是INFORMATICA怎么去拿的。

对于源数据的存放,在优化一中也有提及,SOURCE OWNER对源数据的规范很重要,在源数据存放已定情况下,就需考虑INFORMATICA   怎么去拿的问题,在INFORMATICA中,WORKFLOW运行时走的是NATIVE DRIVER。因此C/S模式的连接速度还是可以的,连接没问题的同时,需要考虑抽取源的SQL了,如果源是RDBMS,就需要考虑是否需要OVERVIDE PRESQL了,OVERVIDE可以根据源数据的具体数据结构判定是否需要加HINT之类的,另外根据性能需要可以在PRESQL里做些抽取前的预处理,这两项根据实际环境有效应用对提升传输数据性能还是比较有效的,另外需要注意的是每个源数据(应该对应的OLTP业务系统DB)都有自己的特点,我们再做抽取时尽量避开源数据应用高峰。(当然如果是ODS系统,需要适时抽取,可以考虑 借助物化视图及流技术来实现,不属于INFORMATICA范畴,呵呵,不过老白的DBA优化日记中详细提到过借助物化视图及流技术来实现OLTPDBODSDB的抽取优化,在此向老白同志致敬)

来自 “ ITPUB博客 ” ,链接:http://blog.itpub.net/22377317/viewspace-687509/,如需转载,请注明出处,否则将追究法律责任。

请登录后发表评论 登录
全部评论

注册时间:2009-09-01

  • 博文量
    17
  • 访问量
    53391