数据治理的重要性在当今数字化时代日益凸显……
数据治理是企业数字化转型的重要组成部分……
数据治理是对数据的收集、存储、处理、共享和利用进行规划、控制和管理的过程,旨在确保数据的安全性、完整性、一致性和可用性,促进数据的有效利用……
一、为什么要数据治理
数据已经成为企业、组织和政府的重要资产。伴随着企业的发展,数据呈爆发式增长。数据的高效采集、存储、应用,已成为数据价值发挥的重要过程。但长期的数据发展过程,也会给系统带来各种各样的数据问题。
-
集群资源缺乏;
-
算力资源不够,数据查询效率慢;
-
数据繁多,数据的精准利用效率低下;
-
小文件增长过快,元数据信息暴增,集群NameNode内存不够;
-
数据存储占用资源太多;
-
数据有效利用率不足;
-
数据质量缺乏……
在苏宁易购的发展过程中,用户、商品、订单、交易、支付、物流、评论、图片、视频等等,各种业务、业态数据暴增,数据的安全、有效利用率、数据查询效率等方面,都会遇到一些挑