数据仓库的ETL抽取-转换-装载

本文详细介绍了数据仓库中的ETL过程,包括数据抽取的要点,如数据源确认、抽取技术及其优缺点,数据转换的任务和类型,以及数据装载的不同方式。ETL工具的选择和使用也是关键,对于数据仓库的建设和维护至关重要。
摘要由CSDN通过智能技术生成

ETL是数据仓库建设中一个最重要和具有挑战性的工作,也是一个耗时而且费劲的工作。

数据抽取

       数据仓库与操作型系统数据抽取的有一些:数据仓库必须从不同的系统中抽取数据;必须根据增量装载工作和初始完全装载的变化来抽取数据;而操作型系统只需要一次性抽取和数据转换。

       数据抽取的要点

       数据源确认:确认数据的源系统和结构;

       抽取方法:针对每个数据源,定义抽取过程是人工抽取还是基于工具抽取;

       抽取频率:对于每个数据源,确定数据抽取的频率,每天、每星期、每季度;

       时间窗口:对于每个数据源,表示抽取过程进行的时间窗口;

       工作顺序:决定抽取任务中某项工作是否必须等到前面的工作成功完成才能开始;

       异常处理:决定如何处理无法抽取的输入记录;

 <

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值