架构师必知必会系列:数据治理与合规性

本文介绍了数据治理与合规性的关键概念,包括数据管理、数据分类、数据隐私、保护和流动,以及如何通过规则引擎和机器学习进行违规处理。讨论了数据湖和云端服务在数据治理中的作用,并概述了数据管理算法和数据分类算法的基本步骤。
摘要由CSDN通过智能技术生成

作者:禅与计算机程序设计艺术

1.简介

数据治理和合规性(Data Governance and Compliance)是企业应对数据泄露、管理、分类、存储、传输、共享、使用、保护等过程中的各个环节。作为一个技术领域,如何落地一套有效的数据治理和合规体系是一个技术人的重要工作。《数据治理与合规性》试图通过系统化的学习路线,帮助架构师和工程师更全面地理解并掌握数据治理和合规相关的核心知识和技能。本文为该系列的第一篇,将从数据管理、分类、隐私、保护、数据流动、违规处理、工具、数据湖、云端服务等多个方面进行讲解。

2.基本概念和术语

2.1 数据管理

数据管理的目的是确保企业拥有准确可靠的业务信息。数据管理包括三个层次:数据源的整合、规范化、数据质量保证。

2.1.1 数据源整合

数据源整合可以从三个角度来考虑:

  • 来源:不同数据源有不同的价值、目的、品质要求。比如高价值的大数据源可以用于精准营销,而低价值的关系数据库则适合保存原子型的、结构化的数据。
  • 流通方式:不同数据的流通方式也不一样。比如传统上是企业内部的传输系统,现在可能采用云平台的数据管道进行整合。
  • 时效性:不同数据源的时效性也是不一样的,比如静态数据和实时数据存在着巨大的区别。
评论 11
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

AI天才研究院

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值