数据管理
文章平均质量分 84
一望无际的大草原
知识的传播者,人工智能大数据与传统行业融合的探索者,能源行业专业化应用数据服务的设计与实践者。
展开
-
读书笔记--数据治理的应用实践与展望
本文主要讲述一些相对成熟的数据治理应用实践案例、数据治理的准备工作、6大误区和5个技术展望,希望对大家在开展数据治理工作及数字化转型工作有所帮助与参考。正如前面多次强调的一样,数据治理工作是一项重实践、持续性迭代、错综复杂的过程性工作,项目周期长,见效时间慢,价值体现间接,甚至需要做好背锅的一系列工作,本书整理出的经典方法论实践,我觉得非常有借鉴意义,就整理出来分享给大家,与大家共勉。原创 2023-08-19 18:27:56 · 942 阅读 · 0 评论 -
读书笔记--数据治理之器
本部分内容主要讲述了数据治理的7把利剑,包括数据模型管理工具、元数据管理工具、数据标准管理工具、主数据管理工具、数据质量管理工具、数据安全治理工具、数据集成与共享工具。数据治理的本质是管理数据资产,改善数据质量,防护数据安全和个人隐私,促进数据应用。不同的企业要根据自身的业务诉求特点,有针对性的选择技术平台和工具。同时,企业要从一开始就意识到数据治理是一项长期持续性的日常工作,数据治理工作的核心是关注对业务价值增长的助力,一般与数据相关的项目都是一项重服务或重实施的项目工作。原创 2023-07-15 18:03:54 · 212 阅读 · 0 评论 -
读书笔记--数据治理之术
本书这七章从数据治理工作开展的具体举措和技术角度,阐述了任何技术或方法都是为数据治理的目标而服务的,企业数据治理的目标和需求不同,所采用的技术和方法也会有所侧重,但是,常用的技术和方法主要就是以下这7项。在数字化时代,数据作为增强企业竞争力的核心要素,企业发展需要对数据进行全面有效的管理和利用,形成相应的规矩模式,主数据作为企业的上下左右串通的黄金数据,作为企业数据核心中的核心数据,是企业开展业务应用、数据分析、系统集成的基础,是数据互联互通、数据分析挖掘的基础,是企业数字化转型成功与否的基石。原创 2023-06-24 16:42:28 · 825 阅读 · 0 评论 -
智能型数字档案馆构建设想
档案作为企业重要的正式权威的数据资源,随着企业的数字化转型,档案工作更需要数字化转型,档案管理与利用急需借助信息技术手段来管理好和记录好,急需挖掘档案资源,发挥其价值,档案的基本价值:凭证价值+参考价值。原创 2023-06-03 21:30:04 · 519 阅读 · 0 评论 -
读书笔记--数据治理之法
本书这八章从方法论的角度,阐述了数据治理的持续性、长期性、全面性和循环迭代性,明确了数据治理要以业务目标为导向,以数据标准为基础,以优化流程为关键,以技术创新为支撑,以组织制度为保障,明确数据治理的业务目标和治理范围,指出数据治理不能一蹴而就的,需要建立起长效运营机制,培养一批有工匠精神的数字化人才,不断打磨数据标准和数据质量,将数据治理变成一种机制、一种文化、一种习惯,才能达到数据治理的标本兼治、长治久安的目标。数据治理是对数据资产的治理,更是对数据资产所属的利益相关方的协调和规范,甚至是利益再分配。原创 2023-05-06 21:54:15 · 915 阅读 · 0 评论 -
Mysql数据库的备份恢复
最近正在做一个异地数据的定期同步汇总工作,涉及到的数据库主要是Mysql数据库,用于存储现场的一些IOT采集的实时数据,所以做了以下备份恢复测试,现场和总部网络可定期通讯,但速度有限,因此计划采用备份还原增量文件方式进行,具体运行环境:Windows10 + mysql-8.0.19-winx64。# 备份 生成新的二进制文件(例:mysql-bin.0000004,mysql-bin.0000005),这个脚本要求每天做,相当于增量的基础二进制文件,后续用这个恢复数据库。# 1.一般恢复(用的最多)原创 2023-04-28 10:41:56 · 781 阅读 · 0 评论 -
读书笔记--数据治理之道
同时数据治理也是一个系统工程、长期工程和全员工程,需要在数据治理过程中逐步形成生生不息的数据文化,将数据思维融合到企业文化中,建立起用数据思考、用数据说话、用数据管理和用数据决策,深入挖掘数据价值,大数据挖掘的根本价值就是从大数据的不确定性中发现规律,获得确定性,来指导改进业务融合创新,甚至再造商业模式或生态,提升企业的市场竞争力。3)推行数据治理,增强数据文化,数据治理是理论与实践的结合体,扎根与数据文化中,数据治理与数据文化培养相互促进,分别在数据安全、质量、组织和人员,制度与流程、技术与工具等方面。原创 2023-04-23 17:34:39 · 626 阅读 · 0 评论 -
OSDU(Open Group Open Subsurface Data Universe)数据平台研究笔记
OSDU解决方案,其核心是将数据和应用分离。使各家公司专注不同业务,降低独立设计开发平台的带来的建设成本,形成关键参考公共组件,加速上游数字化转型。原创 2023-04-14 17:30:36 · 1479 阅读 · 0 评论 -
读书笔记--数据治理学习记录及感悟
本书彻底讲透了数据治理,让我学到了数据治理的四大维度,即从道、法、术、器讲述数据治理的基础性、全局性、系统性、复杂性、持续性和耐性。正如作者提到的,数据治理工作要将其作为生态来做,形成自我驱动、自我进化、可持续发展和长效运营机制来开展,正如大家常说的党建永远在路上,数据治理也一样,数据治理永远在路上。同样,大家常说的数字化转型,其实数据治理就是企业数字化转型的必经之路,治理是数字化转型的基础和前提,同时也是一个系统工程。原创 2023-03-17 10:56:18 · 1193 阅读 · 0 评论 -
什么是数据质量-- 读DAMA数据管理有感
在数据质量管理过程中,一个重要原则就是将改进集中在对组织及客户最重要的数据之上开展(即关键数据),之后需要识别能描述或暗示有关数据质量特征要求的业务规则,只有高质量的数据才能给组织及客户提供更多的价值,实现数据资产价值的再利用和价值的最大化。数据质量需要从组织文化方面变革,特别是数据文化的建立和领导的重视,领导要有数据意识,同时要意识到数据质量管理是一个持续的、不断往复的全生命周期过程。数据质量管理是一个系统工程,长期工程,需要不断的积累总结,迭代循环,形成长尾效应,在未来或者下游业务中才能逐步原创 2023-02-19 22:47:44 · 400 阅读 · 0 评论 -
主数据与参考数据的定义与相互联系
学习了我们在信息系统建设和系统数据整合过程中用到主数据和参考数据的相互关系,明确了两者的定义与异同点。原创 2023-01-07 23:26:49 · 2064 阅读 · 0 评论 -
Cypher高级查询--典型算法--利用Graph Data Science(GDS)的算法实现数据分析与知识洞察
本文继续基于上一篇文章,深入研究基于图谱的各类算法,相比传统的关键词搜索,关系关联查询,全文检索等,基于知识图谱的算法将充分利用知识图谱的实体关系及其属性权重等信息,为大数据分析做支撑,使得数据分析和知识洞察更直观,可解释和快速解决应用诉求,并可快速落地实施。原创 2022-12-15 23:06:16 · 432 阅读 · 0 评论 -
什么是实时数据,有哪些特征及与离线数据的对比分析
什么是实时数据,有哪些特征及与离线数据的对比分析原创 2022-12-09 23:04:13 · 6995 阅读 · 0 评论 -
什么是元数据,如何管理和利用元数据?
元数据就是数据的数据,或者是描述数据的数据。原创 2022-12-03 13:34:02 · 5142 阅读 · 0 评论 -
什么是数据架构--读DAMA数据管理有感
一般来说的架构主要有业务架构、数据架构、技术架构和应用架构,有时候还会提一点功能架构。原创 2022-11-25 23:09:07 · 325 阅读 · 0 评论 -
数据应用服务规划及建设思考
数据应用服务规划及建设的初步思考,供大家参考。未来逐步形成种类各异,面向不同用户,不同级别的应用服务和数据服务。原创 2022-09-12 20:08:51 · 1722 阅读 · 0 评论