电信大数据治理与质量管理

本文根据王志军先生在【DQMIS 2020第四届数据质量管理国际峰会】现场演讲内容整理而成。

图1.1

中国联通科技创新部副总经理 王志军

 

演讲嘉宾介绍 - 王志军      

• CCF大数据专家委员会委员，北京邮电大学兼职教授，可信区块链联盟副理事长，中国通信标准化协会互联网与应用技术委员会副主席。

• 作为主要完成人，获得国家科技进步奖1项，省部级科技进步奖11项，国际奖项2项，获得授权发明专利60余项。

• 主要研究领域在大数据、云计算和移动互联网。目前负责中国联通整体大数据平台及应用系统的规划、建设及创新工作。

演讲目录

• 电信大数据治理背景

• 联通大数据治理之路

• 数据质量管理案例分享

 

王总：非常荣幸来到这么一个论坛，我们作为运营商，来讲讲我们运营商关于电信大数据的治理和质量管理方面的一些工作。

 

我今天讲的包括三个方面：

第一，数据治理的背景。

第二，联通大数据治理的历程。

第三，我们这是一个质量管理的论坛，质量本身也是数据治理当中很重要的一部分，这样的话也把我们数据质量管理的案例给大家做一个分享。

 

整个治理的背景，原来我们说数据是新时代的石油，最近也在提数据是第五大生产要素，土地、劳动力、资本、技术之后的第五大生产要素。

 

 

图1.2

 

对于运营商而言，数据的作用越来越大，并且起到一个基础性作用。运营商核心的资产有什么呢？第一是网络，我们有2G、3G、4G，到现在5G的网络。

 

其实互联网承载的基础设施在运营商手里面，BAT也好，他最终依然是通过运营商的网络给他连接起来的。我们用户是通过运营商的网络去获取这些服务的。

 

目前来讲，相当于说我们的网络对我们贡献的价值一定意义上是越来越低的，尤其是这些年在做提速降费。

 

4G的基站，我们现在4G的基站占全球的50%以上，这相当于全球其它国家的所有基站加在一起没有我们三大运营商的基站多。

 

其实我们的资费是很便宜的，大家可以去看我们现在4G、5G的资费，一定意义上可能也是全球最便宜的。

 

但是网络是一个重资产，投入非常巨大，所以说网络给我们带来的收益越来越低。另一方面，我们觉得数据要给我们带来新的价值，尤其是在我们自身企业数字化转型当中，数据发挥更大的价值。

 

同时运营商作为一个数字化转型的使能者，特别是5G到来之后，我们也希望在这个使能过程中用我们运营商数据的经验积累、平台工具帮助各行各业去做使能。

 

这边我们来看一下运营商有什么数据。一方面是IT生产系统，我们有CRM系统，有用户基本的信息，我们合作伙伴的信息，有用户的画像等，这个是IT生产系统。

 

另外一方面，业务平台，我们有很多的触点，手机营业厅、网上营业厅，各种各样的触点。阅读、视频、音乐等各种各样的平台，它也会产生很多的数据。

 

另外一大方面是通信网络，刚才已经说到了，我们一个客户访问的所有互联网业务其实都流经了我们运营商的通信网络，所以你的流量是经过运营商的。

 

我们一定意义上可以知道用户的行为，这个是用户的业务行为。另外通信网络还有限定的数据，比如说你的手机开机也好，关机也好，你的位置发生变化也好，你上网也好，所有这些东西都会产生限定的，比如说我们现在在这个房间里面，你的手机在不停的跟我们的基站发生联系，这些限定的数据我们是可以获取到的。

 

比如这次疫情中的健康码，运营商是可以知道你所有轨迹的，所以在这里面健康码就发挥了很大作用。健康码背后很大的数据力量是来自于三大运营商的数据，你是疫情的患者，卫健委可能知道的更清楚一点，但我们绝大部分人都是一个健康的人，你的轨迹数据实际上是来自于运营商的。

 

另外是合作伙伴的数据，我们也从互联网上通过爬虫的方式抓取很多数据，所以整个的数据量是非常大的。

 

中国联通刚才已经介绍了，总部这块有160PB的数据，它的数据量非常大，所以这里面对我们的能力要求，一个是海量数据的加工能力，160PB的数据，我们要及时加工，每天有4万亿条新的记录产生&#x