ETL
子安
这个作者很懒,什么都没留下…
展开
-
三大主流ETL工具选型
三大主流ETL工具选型 公司目前在ETL这个环节上基本处于手工开发的原始阶段,领导已经不满意了,估计以后会选择一种工具进行开发,所以先看一下ETL工具的选型。据说同业使用Datastage的比较多,不过看了这篇文章之后,我还是更加倾向于用ETL Automation来实施,可以跟之前做的工作完全对接起来。不过跟朋友聊的时候都说ETL工具比较白痴,没什么技术含量,基本上都是拿来忽悠转载 2014-07-10 16:41:35 · 1612 阅读 · 0 评论 -
Informatica作业问题:日志一直显示为Running
该文章由 u012469920 Informatica作业日志一直显示为Running, 首先drop掉目标表重建排除锁表情况然后排除数据情况定位为fastload问题查看loader问题,最开始以为是fastload服务问题,后来检查out文件,我偶然间看到一个很特别的文件名,查看该文件,如下图所示查询到network down的情况,重新查询fastload发现了A1原创 2014-05-06 15:44:06 · 2274 阅读 · 0 评论 -
Automation作业调度问题:Only one instance of etlslave.pl allow to run
最近,集市有个作业调度出了问题,导致作业一直处于Running状态,但是后台进程并没有对应的作业。去检查日志,发现只有作业调度日志,并未脚本执行日志,这表明作业并未实际运行,检查作业调度日志,发现报了一个错,Only one instance of etlslave.pl allow to run,这说明已经有一个实例在运行了,百度谷歌都没有答案,于是自己动手丰衣足食。开始进入分析阶段。 第原创 2014-05-06 15:41:14 · 2724 阅读 · 2 评论 -
数据仓库的ETL工具
数据仓库的ETL工具数据仓库的架构大体可以分为三部分:后台是数据存储和计算引擎,前端是数据展现分析的用户界面,还有一个重要的部分就是ETL。 ETL所完成的工作主要包括三方面:首先,在数据仓库和业务系统之间搭建起一座桥梁,确保新的业务数据源源不断地进入数据仓库;其次,用户的分析和应用也能反映出最新的业务动态,虽然ETL在数据仓库架构的三部分中技术含量并不算高,但其涉及到大量的业务逻辑和异构环境,转载 2012-08-16 19:08:17 · 1763 阅读 · 0 评论