Databrics
文章平均质量分 86
發糞塗牆
MVP, TOGAF, MCSE, Azure Solution Architect
展开
-
【Azure 架构师学习笔记】- Azure Databricks (10) -- UC 使用
本文属于。本文属于【Azure Databricks】系列。接上文中演示了如何配置一个UC。本文在配置的基础上大概演示其使用。原创 2024-02-22 15:44:56 · 729 阅读 · 0 评论 -
【Azure 架构师学习笔记】- Azure Databricks (9) -- UC权限
本文属于。本文属于【Azure Databricks】系列。接上文UC 是Databricks进行数据治理,集中权限管控, 提高大规模数据存储,共享安全性的新工具。通过基于角色的访问控制(Role-based access control)来实现这种控制。所以接下来我们将介绍角色。原创 2024-02-21 09:36:35 · 744 阅读 · 0 评论 -
【Azure 架构师学习笔记】- Azure Databricks (8) --UC架构简介
UC 简单来说,就是管理两样东西:用户和元存储。原创 2024-02-20 09:24:31 · 726 阅读 · 0 评论 -
【Azure 架构师学习笔记】- Azure Databricks (7) --Unity Catalog(UC) 基本概念和组件
在以前的Databricks中,主要由Workspace和集群、SQL Warehouse组成, 这两年Databricks公司推出了Unity Catalog(UC)之后,整个Databricks架构都有了不一样的改变。它在Workspace之上添加了一层UC, 包含了用户管理(User Management)和元存储(Metastore)。原创 2024-02-19 11:29:56 · 1401 阅读 · 0 评论 -
【Azure 架构师学习笔记】- Azure Databricks (6) - 配置Unity Catalog
本文属于。本文属于【Azure Databricks】系列。接上文。原创 2024-01-15 09:21:28 · 1333 阅读 · 0 评论 -
【Azure 架构师学习笔记】- Azure Databricks (5) - Unity Catalog 简介
DataBricks Unity Catalog(UC)是一个统一的对数据资产治理的解决方案。它对所有数资产进行集中管理,搭配一系列数据治理框架和扩展的审计功能。还有一种描述:UC 是对data lake上的数据展示进行细粒度数据治理的解决方案。它帮助简化安全性,同时对数据治理提供一个集中区域进行统一的控制访问和审计访问。原创 2024-01-08 09:17:42 · 1524 阅读 · 0 评论 -
【Azure 架构师学习笔记】- Azure Databricks (4) - 使用Azure Key Vault 管理ADB Secret
Azure Databricks有access token,是具有ADB内部最高权限的token。在云环境中这些高级别权限的secret都需要很好地被保护起来。Azure Key Vault-backed: secret 存储在Azure Key Vault, ADB 通过创建于AKV支持的Secret Sope来实现引用Secret。Databricks-backed:Databricks自带有一个数据库,也可以通过存储在这个数据库来引用secret。原创 2023-12-29 16:08:28 · 1657 阅读 · 0 评论 -
【Azure 架构师学习笔记】- Azure Databricks (3) - 再次认识DataBricks
在对Databricks有了初步了解之后,如果要深入使用则需要对其进行更深层次的了解。原创 2023-12-13 08:59:13 · 1420 阅读 · 0 评论 -
【Azure 架构师学习笔记】- Azure Databricks (2) -集群
在上文中提到了ADB 的其中一个核心就是集群,所以这里专门研究一下ADB 的集群。原创 2023-12-06 08:56:11 · 1147 阅读 · 0 评论