【Azure 架构师学习笔记】- Azure Databricks (21) --费用相关

本文属于【Azure 架构师学习笔记】系列。
本文属于【Azure Databricks】系列。
接上文 【Azure 架构师学习笔记】- Azure Databricks (20) --Delta Live Table 建议

前言

Databricks是很强大的工具和集成平台，但是随着越来越多地使用它，就没办法必须去面对一个现实——费用很高。特别是集群的使用时长越来越久。本文从Azure的Databricks为例介绍一下ADB 相关的费用内容。

Azure Cost Management可以看到大部分azure 资源的费用，包括ADB， 不过里面会有一些细微差异。使得最终ADB 的费用并不准确。为了了解费用组成，首先要理解ADB 资源的结构。

ADB资源结构

在azure portal上创建ADB时，准确来说创建的是ADB 的workspace，然后每个ADB 会有一些托管资源组和托管资源，这部分就是费用差异的主要来源。
托管资源组内包括了默认的storage account， 用于集群节点的VMs，磁盘，网络资源等。

另外ADB的费用还会根据pricing tier（premium还是standard），集群的类型而定。

通常主要的ADB 费用来自于DBU 的数量和集群类型及集群运行时长。

ADB 总体费用

ADB 总体费用大概分为两大部分：ADB workspace， 集群等的费用，和托管资源的费用。

对于非托管资源，我们可以从资源组或者subscription中点击cost management-> cost analysis 进入费用分析界面。然后搜索我们的ADB 名字。

选择合适的统计类型

也可以在筛选中过滤tag 为vendor的资源，更为准确。

对于托管资源则需要进去托管资源组：

点击下图进入费用界面：

选择group by meter catagory，即可看到这类托管资源的费用。

当我们要统计实际费用时，需要检查一些托管费用是否很多，如果很多的话就要注意加上费用清单以免对账时差距很大。

费用控制

前面提到ADB 的费用主要来自于集群的规模，应用时长等因素，如果使用到更多的特性，就更多考虑事项。关于这部分网上有很多建议这里就不细说。