数据质量-质量管理

最新推荐文章于 2024-08-15 14:09:45 发布
最新推荐文章于 2024-08-15 14:09:45 发布
阅读量393 收藏 1
点赞数 7
分类专栏： 数据治理 文章标签： 大数据 hive 数据库 数据结构 python pandas java
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/IT_6969/article/details/136292093
版权
本文探讨了数据管理中数据质量与数据架构的重要性，介绍了ISO8000在数据质量管理中的PDCA方法，以及如何设计以ISO8000为基础的数据质量管理框架，包括业务定位、流程和责任分配。重点强调了根据业务目标和关键数据问题进行数据质量改进的过程。
摘要由CSDN通过智能技术生成

1、数据管理框架：数据质量与数据架构是数据治理的2大支柱

在这里插入图片描述

2、数据管理总纲：数据管理的“基本法”

在这里插入图片描述

3、数据质量管理政策：明确责任、持续度量、持续改进

在这里插入图片描述

4、管理数据质量的ISO8000标准

ISO8000标准：数据质量管理活动采用PDCA持续改进的方法，对数据质量进行规划、控制、度量和改进

在这里插入图片描述

5、以ISO8000质量标准体系为依据，设计能力支撑、PDCA持续改进和 领导力3个组件的数据质量管理框架

在这里插入图片描述

6、数据质量模块的业务定位

在这里插入图片描述

7、数据质量管理业务流

在这里插入图片描述

8、管理数据质量流程

在这里插入图片描述

9、基于业务目标和TOP数据问题，识别数据目标，层层分解，由数据 Owner承接改进的责任，并对目标的达标负责

在这里插入图片描述

10、确定关键业务对象范围:聚焦影响财报的关键数据和影响业务运营的痛点数据

在这里插入图片描述

王百万_
关注
  • 7
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
ISO 8000（大）数据质量标准及应用
01-21
阐述了ISO 8000数据质量标准产生的背景，将ISO 8000与已有的产品质量标准ISO 9000进行对比，分析了实施ISO 8000可以为企业带来的优势，并举例介绍了ISO 8000的应用方式。分析了我国数据质量现状，并对我国在金融和医疗领域实施ISO 8000 数据质量标准提出了实施建议。旨在帮助我国在大数据、数据质量等前沿研究和工业领域找到国际化标准契合点，推进大数据和数据质量建设。
【2017年第1期】ISO 8000（大）数据质量标准及应用
weixin_45585364的博客
03-13 2552
张坦1，黄伟1,2，石勇31．西安交通大学管理学院，陕西 西安 710049；2．昆士兰科技大学，澳大利亚 昆士兰州 布里斯班市 4702；3．中国科学院...
数据质量和元数据
03-18 262
22745是定义和交换主数据的标准，支持ISO 8000。数据质量的国际标准ISO 8000尚在开发完善中，这一标准的建立是。ISO 8000定义了数据供应链中任何组织都可以测试的一些特性，从。ISO 8000的目的是帮助组织定义什么是符合质量的数据、什么是不。将数据与软件应用分离，则认为数据是“可移植的”。可以存储数据质量度量的结果，以便在整个组织中共享这些结果，并使。软件应用使用或读取的数据，受该软件许可条款的约束，组织可能无法。符合质量的数据，使他们能够使用标准约束要求符合质量的数据，并检。
数据质量-基本概念和定义
数据也是生产力，保持热爱，奔赴山海！
02-23 426
数据治理基本概念和定义
数据质量管理参考体系：ISO9001 VS 六西格玛​
cdfunlove的博客
06-29 1301
数据是数字化时代企业的重要资产，数据可以以产品或服务的形态为企业创造价值。既然数据可以是产品、可以是服务，那问题就简单了。虽然数据质量管理没有成熟方法论支撑，但是产品和服务的质量管理体系却已非常的成熟了。比如，国际上权威的质量管理体系IOS9001、六西格玛等体系方法，对企业的数据质量管理会有什么启发呢？01 ISO9001质量管理体系ISO9001质量管理体系标准是由ISO/TC176/SC2（国际标准化组织质量管理和质量保证技术委员会质量体系分技术委员会）负责制定和修订，旨在为组织质量管理体系的建设提供
数据质量管理
weixin_48109576的博客
12-03 364
一丶数据治理管理的意义 对数据仓库建设具有指导意义，是数据仓库建设成功与否的重要衡量指标。 能帮助业务系统找到一些不易发现的问题，从侧面反映业务系统的可靠性。 有利于提升用户对数据仓库的信任度。 二丶元数据管理层面 1丶DMP,元数据系统和业务库,hive表结构要保持完全一致,不能缺少字段 (一)丶数据层面 1丶重复校验 对于表的主键以及唯一约束等需要进行重复校验 如:单个字段校验,联合字段校验等 2丶格式校验 (1) 非空校验（’\Null’ , ‘’, Null） (2) 字段长度校验(>、&
浅谈数据质量管理
热门推荐
orientdawn的专栏
07-09 1万+
浅谈数据质量管理    笔者在长期的数据仓库、CRM等数据分析项目的开发工作中发现，低下的数据质量往往造成开发出来的系统与用户的预期大相径庭；很多数据仓库、CRM项目应用程度不高或最后失败，归根结底都是数据质量不高造成的。数据质量不高已经成为困扰此类项目的开发人员与用户的一个严重问题。为了提高大家对数据质量的认识，使企业领导重视数据质量的管理工作，笔者试图对数据质量及数据质量管理做一个较全
数据质量管理平台-EsDataClean-白皮书.pdf
11-27
### 数据质量管理平台-EsDataClean-...综上所述，EsDataClean数据质量管理平台不仅提供了一套完整的数据质量管理解决方案，还拥有丰富的功能特性和强大的技术支持，是企业和组织提升数据质量、优化决策流程的理想选择。
XXX公司-数据质量管理办法.pdf
03-22
数据质量管理部门是数据质量管理的职能部门，负责制定数据质量管理办法、流程和规范，制定数据质量管理工作方案并推动执行，持续监控数据质量，定期提交数据质量状态报告，管理或参与数据质量相关项目，建设和维护...
【数据治理实践】数据的免疫体系-数据质量管理.pdf
07-07
数据质量管理是银行数据治理的核心组成部分，它涉及到数据的全生命周期管理，旨在确保数据的完整性、准确性和真实性。在《银行业金融机构数据治理指引》中，数据质量管理的目标、控制机制、日常监控、检查制度、考核...
资产管理公司-数据质量管理办法v0.3.doc
03-22
资产管理公司-数据质量管理办法v0.3.doc
基于Java与Vue的Qualitis数据质量管理平台源码
03-25
项目概述：Qualitis数据质量管理平台是一款基于Java与Vue.js技术构建的综合性解决方案，致力于解决企业级业务系统、数据中心建设及数据治理中面临的数据质量问题。该平台采用Spring Boot框架，集成了Linkis进行高效...
ElasticSearch文档数据关联关系处理
最新发布
qq_44027353的博客
08-15 621
再更新操作时，对象类型和嵌套对象nested方式有一个问题，因为根对象和嵌套对象本质上它们还是存在一个文档中的，每次更新时就可以需要重新索引整个文档。ES提供了父子关联关系，通过维护parent/child的关系，分离它们，使父文档和子文档是两个独立的文档，更新其中一个文档不会影响另一个文档。创建子文档时，必须通过routing指定父文档id，保证父子文档在一个shard中，提高join查询性能。user字段如果保存的是一个对象数组，在搜索时添加两个查询条件，数组中两个对象分别满足一个条件。
软考高级第四版备考---第39天（数据管理）
u013136284的专栏
08-12 931
5.2数据安全管理：数据安全管理是在数据安全标准与策略的指导下，通过对数据访问的授权、分类分级的控制、监控数据的访问等进行数据安全的管理工作，满足数据安全的业务需要和监管需求，实现组织内部对数据生存周期的数据安全管理。6.4数据质量提升：数据质量提升是对数据质量分析的结果，制定、实施数据质量改进方案，包括错误数据更正、业务流程优化、应用系统问题修复等，并制定数据质量问题的预防方案，确保数据质量改进的成果得到有效保持。
Spark MLlib 特征工程(上)
08-14 2041
特征选择的动机，在于提取与预测标的关联度更高的特征，从而精简模型尺寸、提升模型泛化能力。特征选择可以从两方面入手，业务出发的专家经验和基于数据的统计分析。归一化的目的，在于去掉不同特征之间量纲的影响，避免量纲不一致而导致的梯度下降震荡、模型收敛效率低下等问题。归一化的具体做法，是把不同特征都缩放到同一个值域。在这方面，Spark MLlib 提供了多种归一化方法供开发者选择。
谷粒商城实战笔记-175~177-商城业务-检索服务-检索查询接口开发
epitomizelu的专栏
08-13 752
搜索页面搭建完成之后，点击搜索按钮，发送参数给后台服务，后台服务根据参数从Elasticsearch中查询符合条件的数据，返回给前端。
一次性说透“行业研究、市场研究、企业研究”三兄弟
weixin_44904675的博客
08-12 1044
行业研究、企业研究、市场研究之间存在着紧密的联系与区别，它们各自关注不同的研究对象和侧重点，但又在企业决策和市场分析中相互交织、互为补充。
[免费]适用于 Windows 10 的十大数据恢复软件
qq_23996309的博客
08-12 1165
Windows 10 是 Microsoft 开发的跨平台和设备应用程序操作系统。它启动速度更快，具有熟悉且扩展的“开始”菜单，甚至可以在多台设备上以新的方式工作。因此，Windows 10 非常受欢迎，我们用它来保存照片、音乐、文档和更多文件。但有时，由于意外删除、格式化、清空回收站、磁盘显示为 RAW、病毒攻击等原因，数据会丢失。此时，适用于 Windows 10 的数据恢复软件是您的最佳选择。
SparkSQL
m0_73745224的博客
08-13 1001
sparkSQL操作各种数据
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

王百万_

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值