oracle 数据抽取 方案,ETL数据抽取方案简介

《ETL数据抽取方案简介》由会员分享，可在线阅读，更多相关《ETL数据抽取方案简介(5页珍藏版)》请在人人文库网上搜索。

1、目目录录 ETLETL 简介简介 .4 ETLETL 抽取方案抽取方案.4 1.数据抽取.4 2.数据转换和加工.7 3.数据装载.7 4.时间戳方式 .7 5.全量删除插入方式.8 6.全量比对方式.8 . . ETL 简介 数据集成是把不同来源、格式和特点的数据在逻辑上或物理上有机 地集中，从而提供全面的数据共享，是企业商务智能、数据仓库系统的 重要组成部分。ETL 是企业数据集成的主要解决方案。 ETL 中三个字母分别代表的是 Extract、Transform、Load，即抽取、 转换、加载。 (1)数据抽取：从源数据源系统抽取目的数据源系统需要的数据； (2)数据转换：将从源数据源获。

2、取的数据按照业务需求，转换成 目的数据源要求的形式，并对错误、不一致的数据进行清洗和加工； (3)数据加载：将转换后的数据装载到目的数据源。 ETL 作为构建数据仓库的一个环节，负责将分布的、异构数据源中 的数据如关系数据、平面数据文件等抽取到临时中间层后进行清洗、转 换、集成，最后加载到数据仓库或数据集市中，成为联机分析处理、数 据挖掘的基础。现在越来越多地将 ETL 应用于一般信息系统数据的迁 移、交换和同步。一个简单 ETL 流程如图 1 所示。 图 1 ETL 抽取方案 ETL 过程中的主要环节就是数据抽取、数据转换和加工、数据装载。 为了实现这些功能，ETL 工具会进行一些功能上的扩。

3、充，例如工作流、 调度引擎、规则引擎、脚本支持、统计信息等。 1. 数据抽取 数据抽取是从数据源中抽取数据的过程。实际应用中，数据源较多 采用的是关系数据库。 从数据库中抽取数据一般有以下几种方式： 数据源 文件 其他 抽取 临时数据 转换 加载 目标 数据库 . .