本文为普元大数据产品线产品管理部总监吴艳伟在云计算架构设计群的微课堂分享。如需加入微信群参与微课堂、架构设计与讨论直播,请直接回复此公众号:“加群 姓名 公司 职位 微信号”。
大家好,很高兴在这里和大家探讨和分析元数据管理的技术和想法。本次分享的内容包括以下三部分:
首先,通过以下这张片子我们先看一下传统元数据管理都在管哪些内容。
由于元数据管理是随着数据仓库建设过程逐渐完善起来的,因此元数据管理主要集中在数据领域。例如数据结构、数据加工转换关系等。
元数据管理起源于传统数仓,逐渐扩大到大数据管理,再到服务管理,不断地突破传统管理范畴,实现广义元数据管理。
在这个过程中,稳定可扩展的管理架构是元数据实施的保障。
为了实现元数据管理目标,需要有以下几个关键步骤:
1、采集:第一步必须把所有的元数据信息纳进管理体系,保证有管理对象;
2、存储:采集进来后必须有合适的存储能力和策略,保证能够很好地应用;
3、管理和应用:要有很好的自身管理,同时又能方便地共享应用。
随着元数据管理范畴不断扩大,元数据来源、类型越来越多,如何保证元数据从采集、存储到应用等关键环节的稳定和扩展,是元数据管理关注的重点。