数据治理
文章平均质量分 79
数据治理、数据资产管理相关
BabyFish13
不要急,慢慢来;控制好节奏,奋斗到底!
展开
-
数据治理8大核心模块建设
对于数据的销毁,企业应该有严格的管理制度,建立数据销毁的审批流程,并制作严格数据销毁检查表。数据质量管理是对数据从计划、获取、共享、维护、应用、消亡生命周期的每个阶段里可能引发的各类数据质量问题,进行识别、度量、监控、预警等一系列管理活动,并通过改善和提高组织的管理水平使得数据质量获得进一步提高。数据资产管理是指对数据资产进行规划、控制和提供的一组活动职能,包括开发、执行和监督有关数据的计划、政策、方案、项目、流程、方法和程序,从而控制、保护、交付和提高数据资产的价值。原创 2023-06-01 14:58:10 · 1112 阅读 · 0 评论 -
数据仓库元数据(11年文章新浪博客迁移)
1、元数据的概念传统定义上,元数据Metadata是关于数据的数据(data about data),在数据仓库中,元数据是描述数据仓库内数据的结构以及建立方法的数据,按其用途分为技术元数据和业务元数据。元数据描述了数据仓库的数据和环境。元数据可以分为两类。一类是管理元数据(Administrative Metadata),它是对源数据及其内容、数据仓库主题、数据转换及各种操作信息的描述。另一类是用户元数据(UserMetadata),它帮助用户查询信息、理解结果、了解数据仓库中的数据和组织。元原创 2022-03-24 09:40:15 · 679 阅读 · 0 评论 -
DAMA-DMBOK 数据治理功能框架
1、DAMA知识领域车轮图2、DAMA-DMBOK 功能框架标识出了11 个主要的数据管理知识领域数据治理(Data Governance)通过建立一个能够满足企业数据需求的决策体系,为数据管理提供指导和监督数据架构(Data Architecture)定义了与组织战略协调的管理数据资产蓝图,以建立战略性数据需求及满足需求的总体设计数据建模和设计(Data Modeling and Design)以数据模型的精确形式,进行发现、分析、展示和沟通数据需求的过程数据存储和操作(Data Storag原创 2022-03-18 10:03:43 · 3317 阅读 · 0 评论 -
所谓数据资产管理
1.目标可见:通过对数据资产的全面盘点,形成数据资产地图。针对数据生产者、管理者、使用者等不同的角色,用数据资产目录的方式共享数据资产,用户可以快速、精确地查找到自己关心的数据资产。可懂:通过元数据管理,完善对数据资产的描述。同时在数据资产的建设过程中,注重数据资产业务含义的提炼,将数据加工和组织成人人 可懂的、无歧义的数据资产。具体来说,在数据中台之上,需要将数据资产进行标签化。标签是面向业务视角的数据组织方式。可用:通过统一数据标准、提升数据质量和数据安全性等措施,增强数据的可信度,让数据科原创 2022-03-10 09:16:15 · 4133 阅读 · 0 评论 -
数据治理中的数据分类
一、记录类数据1、事务数据事务是数据库处理数据的一个单元,可以理解为一次数据库CRUD的操作。事务数据就是记录下数据库操作的系统日志数据,以及特定业务场景中,专门记录的业务操作事务记录的数据,比如用于安全审计的系统登录日志。2、业务数据业务数据就是为了完成业务流程而存储的业务操作类数据。就是业务系统的绝大多数表和数据。3、日志数据早期的日志数据是属于事务数据中的。现在大数据时代,用户访问数据变得越来越重要,所以单独分离出来。二、管理类数据1、元数据元数据(Meta-d..原创 2022-03-09 11:32:23 · 6922 阅读 · 0 评论 -
所谓数据治理
转自:所谓数据治理 - 知乎 (zhihu.com)那些年,我们一起踩过的坑大数据时代,数据成为社会和组织的宝贵资产,像工业时代的石油和电力一样驱动万物,然而如果石油的杂质太多,电流的电压不稳,数据的价值岂不是大打折扣,甚至根本不可用,不敢用,因此,数据治理是大数据时代我们用好海量数据的必然选择。但大家都知道,数据治理是一项长期而繁杂的工作,可以说是大数据领域中的脏活累活,很多时候数据治理厂商做了很多工作,但客户却认为没有看到什么成果。大部分数据治理咨询项目都能交上一份让客户足够满意的答卷,但是原创 2022-03-09 09:01:43 · 540 阅读 · 0 评论 -
从数据库到数仓到数据湖再到数据治理
1、关系数据库在计算机系统的初期,业务系统的雏形刚刚开始,比如记录订单的系统。这个时候,连数据仓库都没有出现。那么用户有数据分析的需求怎么做呢?答案很简单,直接从业务系统来处理数据。这样的场景现在依然存在,比如饭店的收银系统,可以导出一天的交易数据。随着业务系统越来越复杂,数据分析的要求也越来越高。这个时候,继续在业务系统做数据分析就变得不是很合适,原因之一是业务系统的架构并不擅长处理大量的历史数据分析和多维度的数据建模,二是数据分析对业务系统的性能造成非常大的挑战,甚至影响正常交易进行。2、数原创 2021-12-17 15:32:16 · 1346 阅读 · 0 评论 -
数据治理平台
一、数据治理功能模块1、功能模块元数据管理:包括元数据采集、血缘分析、影响分析等功能数据标准管理:包括标准定义、标准查询、标准发布等功能数据质量管理:包括质量规则定义、质量检查、质量报告等功能数据集成管理:包括数据处理、数据加工、数据汇集等功能数据资产管理:包括数据资产编目、数据资产服务、数据资产审批等功能数据安全管理:包括数据权限管理、数据脱敏、数据加密等功能数据生命周期管理:包括数据归档、数据销毁等功能主数据管理:包括主数据申请、主数据发布、主数据分发等功能2、主要模块详细说明原创 2021-01-14 08:58:13 · 4684 阅读 · 0 评论 -
数据资产管理职能
《数据资产管理实践白皮书4.0》中规定,数据资产管理的管理职能包括数据标准管理、数据模型管理、元数据管理、主数据管理、数据质量管理、数据安全管理、数据价值管理和数据共享管理共8个方面。而在数据中台中,还可以包括数据资产门户、生命周期管理、标签管理3个新的管理职能。1.数据标准管理大数据的标准体系框架共由7个类别的标准组成,分别为基础标准、数据标准、技术标准、平台和工具标准、管理标准、安全和隐私标准及行业应用标准。数据标准是对数据的表达、格式及定义的一致约定,包含数据业务属性、技术属性和管理属性.原创 2022-02-15 11:02:33 · 2107 阅读 · 0 评论