元数据:
对数据的结构化描述,使得数据更容易理解、查找、管理和使用
元数据分类:
业务元数据、技术元数据和权限元数据
业务元数据:表名,字段名,字段描述,指标口径,血缘关系
技术元数据:字段长度、字段类型,表存储路径,表压缩方式,表存储格式,sql脚本
权限元数据:表管理员,表读写权限用户,表所属部门,表安全属性,数据安全等级
元数据作用:
血缘分析 - 是告诉你数据来自哪里,都经过了哪些加工
冷热度分析 - 判断表的访问情况
关联度分析 - 是告诉你数据和其他数据的关系以及它们的关系是怎样建立的
元数据管理的价值:
一图在手,天下我有 - 通过元数据以企业全局视角对企业各业务域的数据资产进行盘点,实现企业数据资源的统一梳理和盘查,
有助于发现分布在不同系统、位置或个人电脑的数据,让隐匿的数据显性化
追根溯源,发现数据问题本质 - 通过元数据血缘分析,能够快速定位数据来源和加工处理过程,能够帮助数据分析人员快速定位数据问题