DAMA数据治理与数据质量--非结构化数据的数据质量管理

本文根据汪广盛先生在【DQMIS 2020第四届数据质量管理国际峰会】现场演讲内容整理而成。

 

图1.1 

DAMA(国际数据管理协会)中国区主席  汪广盛

演讲嘉宾介绍 -- 汪广盛

• 国际数据管理协会（DAMA）中国区主席，美国区块链技术应用研究院院长。

• 曾先后供职于Bank of American(美国银行)、GE (通用电气)、KPMG (毕马威)、AOL (美国在线)、Google(谷歌) 、美国财政部、GEICO等。主要从事大数据、人工智能和区块链等相关的咨询、研发、实施和培训。同时还先后兼任马里兰州亚太商会董事，旅美商务研究和开发协会董事，旅美大专院校联合会(DC)首席科学家，北京/上海交通大学教授等。

• 2017年回国后，曾先后参与了多个国家部委关于数据标准、数据治理指导意见、数据隐私保护等相关条文的讨论和编写。组织编著、翻译和出版了《大数据理论和工程实践》（人民邮电出版社，2018年12月）、《穿越数据管理的迷宫-数据管理执行指南》（机械工业出版社，2020年5月）、《DAMA数据管理知识体系2》（机械工业出版社，2020年6月）、《区块链改变游戏规则》（清华大学出版社，预计2020年8月）等，并为多个部委、省级机关、和企业提供数据管理和数字化转型的培训。

演讲目录

• DAMA简介

• 非结构化数据的质量管理

• 非结构化数据管理的未来趋势

• 总结

 

汪主席：尊敬的各位领导、各位嘉宾、各位同仁们，大家早上好！非常感谢谭总给我们这么好的一个机会，让我们来介绍一下DAMA，我将从4部分向大家汇报一下。

 

我首先想介绍一下我们这个协会，因为待会会引出几个话题。今天的话题主要是数据质量，所以我想紧紧围绕这个话题向大家做汇报。

 

我们这个协会是1980年成立的非营利性的机构，在全世界基本都有分支机构，当然主要的力量还是在美国和欧盟。会员不多，才1万个人，所以跟PMP相比的话，我们还是一个很小的协会。我们最为人所知的是两件事情，一个是我们出了本知识体系，这本书今年5月份国内已经翻译出版了，都是我们协会的一些志愿者翻译的。有两本，右手边那本是专门给我们数据管理的专业人士写的一本书，左手边这本《穿越数据的迷宫》基本上是为领导写的，领导也需要知道数据管理到底是怎么一回事，所以我们写了两本书。

 

 图1.2

 

第二个比较为人所知的是我们有一个认证叫CDMP。这个认证是由我们国际数据管理协会统一命题考试，是一个国际认证，也是行业认可的。很有意思的是，我在国内也教一些课，真的很少有人知道CDMP，像在美国的话，如果你是搞数据管理的，你必须要有一个PMP的证书，如果你搞数据管理或者搞数字化转型，你需要一个CDMP的证书，这是通用的一个标准，但是国内相对来说对CDMP了解比较少。

 

这是我们的知识管理体系，大家都在讲数据治理，数据治理到底是什么，右手边是从技术的层面，我们认为哪些是数据管理必须要做的。 

 

图1.3

 

在DAMA，数据管理这个概念跟国内通用的数据治理是一回事，我们这边的数据治理指的更多是管理制度、组织构架。像我们一般