【Azure Data Platform】ETL工具(6)——重新认识Azure Data Factory

本文深入介绍了Azure Data Factory(ADF),重点在于其核心功能——复制和转换数据。ADF提供图形化界面创建自动化管道,支持从多种数据源获取并处理数据。文章详细阐述了ADF的主要组件,包括管道、数据流、Power Query、数据集、链接服务和触发器,以及如何通过监视器和管理页进行监控和管理。
摘要由CSDN通过智能技术生成

本文属于【Azure Data Platform】系列。
接上文:【Azure Data Platform】ETL工具(5)——使用Azure Data Factory数据流转换数据
前面开篇第一章主要以初学者的角度去看ADF,本文以已经会基础操作的角度去重新介绍一下ADF,并且介绍主要组件之间的关系。

ADF 极简介绍

ADF 是什么?简单来说就是个图形化为主的创建自动化管道(pipeline)的服务。

那它能做什么?看下面的图:
在这里插入图片描述
说白了,ADF主要做两件事(不仅仅这两件):复制数据(Copy data)和转换数据(transform data)。

Copy Data:

复制数据是ADF的核心功能。可以从超过90中SaaS 应用, 本地数据源和云数据源中获取数据。 而且复制过程还能对数据的格式进行操作。

Transform Data:

在复制数据过程,还能进行数据转换,过去这些操作通常使用数据库的SQL/存储过程, Hadoop等工具来完成。 从2019年开始,引入了一个叫数据流(Data Flows&

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值