摘要:在数字经济时代下,数据成为运营商的核心资产,DataOps是释放数据价值的有效模式,而大数据平台是实现DataOps的技术基础。通过对DataOps与大数据平台的发展进行梳理,阐述了DataOps的内涵,提出DataOps应用于运营商大数据平台的方法,并构建了基于DataOps的运营商大数据平台架构。
关键词:DataOps;大数据平台;敏捷数据交付;智能数据治理;数据资产运营
0 引言
十九届四中全会首次将“数据”增列为一种生产要素,数据要素所引发的生产要素变革,正在重塑企业的生产方式和商业模式,如何充分发挥数据要素的价值是数字经济时代下企业关注的焦点。对于通信运营商而言,其数据具有规模大、来源广、准确度高等特点,作为基础通信数据赋能多行业数字化发展,对数据质量水平和数据生产效率提出了更高要求。DataOps通过引入敏捷交付、智能治理、资源运营的理念与方法,指导企业建立生产级的大数据中心,加快数据开发流程,提升数据应用效率,构建数据资产价值闭环。
1 DataOps与大数据平台的发展现状
1.1 DataOps的演进
DataOps强调数据团队的敏捷协作和持续提升。Lenny Liebmann[1]首次提出DataOps的概念,他认为DataOps是优化数据科学和运营团队之间协作的一系列实践集。2018年,Gartner将DataOps列入了Data Management(数据管理)的技术成熟度曲线,Gartner认为DataOps是一种协作数据管理实践