中台实践:数据中台构建五步法

本文详细介绍了数据中台建设的五个阶段:高阶规划、系统设计、开发实施、试运行和持续运营。规划阶段涉及业务和技术调研,形成蓝图设计和应用设计;系统设计涵盖数据架构、平台架构和数据模型设计;开发实施包括环境搭建、数据集成和代码研发;试运行确保数据准确性;持续运营则关注系统维护和价值创造。通过这一系列步骤,企业可构建高效、稳定的数据中台,驱动数字化转型。
摘要由CSDN通过智能技术生成

陈新宇 罗家鹰 江威 邓通

读完需要

24

分钟

速读仅需 8 分钟

云徙科技
国内领先的数字中台服务商,以“业务 数据”双中台为核心技术,驱动企业数字化转型,助力业务持续增长。公司在杭州、广州设立研发中心,公司现有员工 800+,其中技术团队占公司人数 80%以上,具有强大的研发和创新能力。

陈新宇
云徙科技联合创始人兼首席架构师,中国软件行业协会应用软件产品云服务分会“数字企业中台应用专家顾问团”副主任专家,香港中文大学计算机科学与工程学博士,领导云徙科技数字中台系统的规划、建设并赋能企业落地实施。曾负责并参与大型企业管理软件基础架构和开发平台的设计与研发。此外,还曾参与数据库的自然语言交互、分布式系统、软件可靠性等多项学术性研究项目。

罗家鹰
云徙科技副总裁,上海交通大学学士,中山大学 MBA。近四年来,一直致力于阿里中台赋能数字商业的研究与布道。曾任金蝶软件(中国)有限公司 IT 规划首席顾问、用友网络电子商务事业部总经理。拥有 20 年的企业咨询及服务经验,先后主导了数十家大型企业的数字化转型咨询方案。

江 威
云徙科技地产事业部总经理,领导中台在地产方面的建设与落地,长期从事阿里中台赋能地产行业的研究与布道,拥有丰富的地产项目实施经验。曾任明源云、阿里云地产行业等业务总监,具备丰富的地产行业业务及产品经验,先后主导过万科、保利、新城、富力等多家大型地产的数字化项目。

邓 通
云徙科技汽车事业部总经理,香港中文大学信息工程硕士,专注于汽车行业数字化营销研究。曾多次创业,涉足社群电商、智能家居、互联网+农业 S2B2C 中台项目,先后主导过长安汽车、一汽集团、长安福特等头部车企以及博郡汽车、爱驰汽车等新能源车企基于汽车行业中台的数字化营销项目。

1

   

数据中台构建五步法

系统都是为应用而生的,数据中台也不例外。要构建一套数据中台服务于企业内部和外部运营,需要有成熟的数据中台建设方法论作为指导。企业建设数据中台遵循的方法论就像菜谱,初学者根据菜谱按部就班就可以轻松完成一道道菜肴,高阶玩家根据菜谱可以查漏补缺,使厨艺精进。数据中台建设方法论可分为高阶规划、系统设计、开发实施、试运行和持续运营 5 个阶段,如图 4-6 所示。

图 4-6 数据中台建设五步法

1.1

   

高阶规划

万丈高楼平地起,规划阶段之于数据中台建设,就相当于构建一座水库前的勘察和分析,了解建水库目标、水源、蓄水、水库下游,为设计图纸提供基础支持。同样建设数据中台也需要对企业的数据源、存储数据的方式、数据服务诉求等信息进行摸查,构建未来的蓝图。对现状和将来了解得越清楚,对数据中台的轮廓就了解得越清楚,数据中台的成功就越有保障。数据中台规划阶段可细分为业务架构师主导的业务规划和数据架构师主导的数据规划。这两部分内容是相辅相成的,由业务规划进行业务输入,由技术规划对数据现状进行探查,判断业务规划蓝图的可行性,最终形成可行的蓝图规划与应用设计。

1.业务规划

业务规划分为三个步骤:业务调研、蓝图设计和应用设计。首先通过业务调研对企业进行了解。

(1)业务调研

业务调研主要包括以下两方面。

第一,战略与组织解读。企业战略决定了数据中台的上限,也决定了企业对数据中台的期望与目标。企业战略不仅能折射出企业的数据诉求本质,也能体现出数据中台对企业的价值。因此,通过明确企业战略对企业运营提升的要求,可以抓住企业运营提升的关键环节,对公司管理现状进行诊断,分析数字化能力给企业带来的效率和效益提升,明确企业数字化优化的目标与范围。同时,明确企业的组织架构,熟悉企业的业务模式,了解企业的业务板块,梳理业务部门的业务流程。

第二,调研访谈。调研访谈是通过问卷或针对性访谈的形式,对业务专家进行调研的过程。在调研的过程中可以收集报表、汇报材料、报告、可视化看板、系统建设材料等信息辅助理解业务。调研访谈的目的是通过对业务专家的调研,了解企业与业务,了解业务诉求与痛点,为后续的蓝图设计和应用设计提供业务知识基础和输入。调研前需要对业务背景、行业知识、调研问卷分布做准备,以便达到期望的调研效果。可以将调研问卷提前分发给业务专家,以便业务专家更有针对性地准备问题答复,提高调研效率。调研后需要结合业务场景,对数据进行推导,得出指标需求。推导的过程是现状诉求→需求推导→解决手段→场景推导→指标推导,详见表 4-1。

表 4-1 数据推导过程

(2)蓝图设计

通过业务调研了解企业,结合数据现状与业务痛点,将企业不同实体的数据进行提炼、抽象,形成数据域,将数据资产按照一定的体系进行规整,再结合业务诉求对数据分析场景进行提炼,最终形成一张囊括企业数据现状与未来的蓝图,为后续数据中台的建设提供宏观与发展路线的指导。

蓝图设计可从以下几个方面进行分析设计:数智化转型的一些考虑和战略、设计方法论、对客户业务的整体解析、数据中台价值化、分析链路梳理、数据域梳理和划分等。数据中台蓝图一般包括三部分:数据源、数据基础能力及数据洞察与智能应用规划。通过数据中台蓝图可以快速了解企业数据中台的范围与价值。

(3)应用设计

衔接蓝图设计,结合数据调研的成果判断数据可行性后,将数据分析场景、智能应用进行系统落地的可视化设计,形成 PRD 文档和原型进行产品设计与说明,最终促成应用的实现。

2.技术调研

技术调研是对企业的 IT 整体现状进行摸查,调研内容包含企业主要业务及核心业务系统、整体网络拓扑现状、信息安全相关要求等。

对企业主要业务和核心业务系统的调研包括业务和技术两个方向。业务上梳理企业的主要业务及核心业务流程,技术上则梳理各业务系统及它们之间的数据流转关系。两者相互印证,输出企业的信息系统现状大图,并基于此确定后续的业务系统调研范围。

整体网络拓扑现状的梳理,有助于厘清企业业务数据的存储分布位置、数据传输的带宽限制等信息,为后续数据集成方案设计提供基础信息输入。

通过信息安全相关的调研了解企业内与信息安全相关的组织部门、规章制度等信息和要求,为后续制定数据处理和使用的流程规范提供依据。

3.系统和数据调研

系统与数据调研的目的是厘清企业数据资源的种类、分布、存储及管理现状。系统与数据调研是按业务系统进行盘点的。系统盘点的范围来源于技术调研的输出。盘点项包括业务流程、业务动作、数据源、数据表、数据字典。该调研工作一般由技术主导。

业务流程及动作的调研,需要从使用者的角度出发,确认业务系统每个原子操作产生了哪些数据,数据存储在哪些数据表中。这部分的调研需要调研人员通过系统文档资料梳理系统流程,并通过实际操作来验证数据流程,最后结合数据字典将系统流程和数据表进行关联。

数据源盘点需关注数据源种类,如结构化、半结构化和非结构化数据,以及链接地址、账号、密码、可抽取数据的时间段等;数据表级别关注是否为核心表、时间戳字段、数据更新标识、表的总数据量、日增数据量等信息。

系统与数据调研完后,需输出相应的产出物,并与业务系统的相关人员就输出物中的产出项进行沟通和确认。在实际实施中,不同企业的信息系统建设情况也不尽相同,输出物中的内容项可能需要以迭代方式进行补充调研。

4.总体规划输出

规划阶段包含业务侧和技术侧的调研,两边的调研工作可以并行开展。在业务侧完成调研及需求规划后,技术侧需要结合业务侧的产出进行相关的数据探查事项,主要目的是确认调研产出是否足够支撑业务规划的数据应用建设。

总体规划在最终定稿后,业务侧需输出指标、标签清单、数据应用规划文档等,而技术侧需输出技术和系统调研的相关输出物,以及系统调研阶段的总结性报告。

1.2

<
评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值