【Azure Data Platform】ETL工具(22)——Azure Databricks与ADF整合

本文介绍如何将Azure Data Factory (ADF) 与 Azure Databricks 整合,包括环境准备、在Databricks中创建表,以及在ADF中配置数据集以连接Databricks Delta Lake,实现数据ETL流程的高效协同。
摘要由CSDN通过智能技术生成

本文属于【Azure Data Platform】系列。
接上文:【Azure Data Platform】ETL工具(21)——Azure Databricks使用(1)——访问Azure Blob
本文演示如何整合ADF和Azure Databricks

环境准备

前面已经演示过如何创建ADF和Azure Databricks,下面来演示如何整合它们。首先对于Azure Databricks,先要创建集群(集群是基础),然后创建一个表。

如下图导航:

在这里插入图片描述
会出现一个新界面,提示创建新表的配置。可以通过上传文件,也可以通过其他数据源。这里先用前面用过的文件作为数据源上传,上传完毕后,可以选择集群:
在这里插入图片描述
然后点击【preview table】可以看到下图所示,同时因为文件的第一行是表头,所以勾选“First row is header”,点击【create table】创建Databricks的表。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值