- 博客(39)
- 资源 (2)
- 收藏
- 关注
RSS订阅
原创 Datablau Data Modeler 新一代数据库建模工具
Datablau Data Modeler好用的专业建模工具Datablau DDM是新一代数据模型管理工具，由ERwin数据建模研发骨干开发团队荣誉出品。传统建模工具主要面向设计，而DDM创新的融合了数据治理理念，把数据治理推进到开发流程中，进行开发态的源头治理，解决了标准落地的难题。从根本上控制企业增量的数据质量问题。目前已经在多家银行、基金、保险、能源、政府、制造业等使用，效果显著。...
2019-08-09 12:59:57
9967
15
原创 数据架构最新趋势：Data Fabric 和 Data Mesh （值得收藏）
在我看来，华为今天数据管理的形态与Data Mesh有异曲同工之处。业务部门驱动，流程IT作为赋能部门，以项目制帮助业务线构建数据底座，也有不少数据能力强的业务部门直接就“自给自足”。最终构建了一个个Data Domain & Data Product（业务领域数据产品），以业务线为单位从源端进行数据治理。对于国内大多数企业来讲，距离走上Data Mesh这条路还很长。业务部门对数据重要性的认知，对数据价值的认识，及对保护企业数据资产的意识还很薄弱，更缺乏治理和挖掘数据资产价值的紧迫感。...
2022-08-11 11:23:15
2833
原创 【万元大奖】2021中国数据建模大赛 正式启动
作为数据库底层设计的重要一步，数据建模指的是对现实世界各类数据的抽象组织，确定数据库需管辖的范围、数据的组织形式等直至转化成现实的数据库；将经过系统分析后抽象出来的概念模型转化为物理模型后，在visio或erwin等工具建立数据库实体以及各实体之间关系的过程。数据模型开源社区社区主页 https://datamodeling.cn大赛主页https://datamodeling.cn/cdmw/2021数据模型工具下载页https://datamodeling.cn/main/download.
2021-11-26 15:59:06
352
原创 详解数据建模&数据域
关注Datablau / 干货都在这了！常常听到大家对数据域（Domain）、数据类型（Data Type）及数据标准概念的混淆。特以此文将这几个概念详细讨论一下。为了更好的帮助大家理解数据域、数据模型、元数据之间的关系，首先我们以图示来表达它们之间的关系：数据域（Domain）也称值域。域是用来描述一个字段的技术属性的集合，包括数据类型，数据长度，小数点位数以及取值范围等。具有以上技术属性相同定义的字段可以包含进一个域，而当域的属性定义发生改变时，所有引用它的字段的属性都会对应进行提示。数据标准
2021-08-29 15:32:16
1928
2
原创 构建数据中台模型
建立一个数据中台模型满足您的所有商业智能目标，这绝非易事。使用 Datablau Data Modeler，您可以将数据中台模型生命周期中涉及的大量标准和重复性任务减少到几个简单的步骤。在本文中，我们将以一个案例描述使用 Datablau Data Modeler 通过分步方法构建数据中台模型的过程。1 从一个案例说起某企业有一个在线客户订单业务，目前在MySQL 数据库中维护其销售数据。行业中数据中台大行其道，该公司最近决定在整个企业中实施数据中台战略，以提高商业智能并获得更可靠的业务决策助力。.
2021-08-03 17:50:08
1694
2
原创 数据架构的实践之路(三）-数据职业发展路线
2020年12月18日，由中国信息通信研究院、中国通信标准化协会联合举办的“2020数据资产管理大会”在京召开。在金融论坛上，Datablau数语科技创始人&CEO王琤发表了题为“金融业数据架构的实践之路”的主题演讲。此文为演讲的第三部分。第三块就是比较轻松的话题，跟大家聊聊职业发展这个事，因为前面都是讲的数据架构，所以数据架构师、数据建模师、数据工程师这三者到底是什么关系，这三者都需要一些什么样的技能。之前像哈佛商业评论谈到“数据科学家是21世纪最性感的职业”，现在这个叫...
2021-01-08 11:14:58
675
原创 数据架构的实践之路(二）-数据资产的价值输出
2020年12月18日，由中国信息通信研究院、中国通信标准化协会联合举办的“2020数据资产管理大会”在京召开。在金融论坛上，Datablau数语科技创始人&CEO王琤发表了题为“金融业数据架构的实践之路”的主题演讲。此文章为演讲的第二部分。我们去年做了一些数据资产服务平台的项目觉得蛮通用性，就是数据资产的价值输出。我们原来更多站的视角是数据管理者的角度，大家都在做数据资产盘点，但盘点完了又怎样。除了数据管理者，还有数据所有者（企业自身）和数据的使用者（主要是我们的业务...
2021-01-08 11:08:13
828
原创 数据架构的实践之路(一）-数据架构的三种实践模式
2020年12月18日，由中国信息通信研究院、中国通信标准化协会联合举办的“2020数据资产管理大会”在京召开。在金融论坛上，Datablau数语科技创始人&CEO王琤发表了题为“金融业数据架构的实践之路”的主题演讲。各位嘉宾大家下午好，又站在数据资产管理大会上，每年都是在这个大会上跟大家见面，也是汇报一下我们今年的一些最新的进展。今天想分享的主要的几个内容，第一块数据架构的三种实践模式，因为我们今年陆陆续续做了很多企业的数据模型管控解决方案，数据模型架构设计这块总结出来一些..
2021-01-08 11:02:46
993
原创 中台架构与数据模型管控
中台架构与数据模型管控本文根据王琤先生在【DQMIS 2020第四届数据质量管理国际峰会】现场演讲内容整理而成。各位新老朋友，好久不见，这是疫情之后首个数据治理线下大规模的会，如今各个企业的数据治理制度体系都已经慢慢的建立起来了，下一步就是我今天主要演讲的内容，中台架构，包括数据模型管控，这块就是躬身入局，开始真正落地数据治理了。我看到今天基本上每个嘉宾上面的片子都有DAMA DMBOK，所以我这个演讲涉及到DMBOK上面这两块，数据架构(DataArcchitecture)和...
2020-10-12 13:03:30
2457
3
原创 数据架构与数据模型
数据架构与数据模型数据架构与数据模型两者关系经常是讨论的热点。 因为数据架构里面主要工作和产物就是数据建模和数据模型，那为什么要将两者作为独立的两个过程域。 本文将对此问题进行探讨。在《数据管理知识手册》（DMBOK 2）的第二版中，数据架构定义为管理数据资产的蓝图”从广义上讲，数据架构会定义，'我们作为一家企业要做什么数字化业务？最适合该目的的技术是什么，以及它们如何协同工作？”另一方面，数据架构是企业架构（Enterprise Architecture）的一部分。 ...
2020-06-26 21:12:57
2597
原创 如何规范化数据库模型设计
良好的数据库模型设计可以保证数据资产的持久性，可读性，有效性和完整性。 该从哪些方面规范数据模型提高数据库设计的质量呢？根据Steve Hoberman的《Data Model Scorecard》，主要几个方面：模型正确性(模型是否清晰表达了业务逻辑)How well does the model capture the requirements?由于需求调研不完备，需求理解不充分，项目前期缺乏足够的沟通，以及数据调研准备不足、后期测试不充分等原因。数据模型（尤其是逻辑模型）与实际业
2020-06-18 10:19:53
1352
1
原创 多人协作的敏捷数据库建模
无论数据中台还是传统数仓的数据库建模都是最关键的部分.传统数据建模以个人单兵做战为主. 一个开发团队由一两个人主要负责数据库设计.随着系统越来越多, 数仓越来越复杂. 企业的数据库模型设计需要跨系统跨团队, 由更多人来参与, 有的团队是将数据模型以文件形式互相传来传去,最终衍生出很多个不完整的版本; 有的团队是放在共享服务器上, 但多人同时修改就会严重丢失其中一部分的内容; 还有的团队是放在SVN, SharePoint这类版本控制服务器, 但仍无法比较版本间具体修改的内容
2020-05-10 14:28:48
1891
原创 如何通过数据模型设计生成数仓开发脚本(DML)
众所周知在数据建模工具中设计的ER图可以直接产生DDL脚本并执行到数据库生成数据库schema，称为正向工程．另一方面,在数仓设计开发过程中常常使用DML，DML是Data Manipulation Language的缩写，意思是数据操作语言，是指在SQL语言中，负责对数据库对象运行数据访问工作的指令集，以INSERT、UPDATE、DELETE三种指令为核心，分别代表插入、更新与删除，是开发...
2020-04-27 13:35:49
1151
原创 数据纳入生产要素，Datablau政府数据模型管控解决方案助力政府数据开放
数据纳入生产要素及政府领域的数据模型中共中央、国务院3月30日发布《关于构建更加完善的要素市场化配置体制机制的意见》．《意见》提出，加快培育数据要素市场，推进政府数据开放共享，提升社会数据资源价值，加强数据资源整合和安全保护。将数据纳入要素范围，意味着数据与资本、劳动等传统要素拥有了相同的地位和角色。这对于探索建立统一的数据标准规范、支持构建多领域数据开发利用场景，推动壮大我国数字经济规...
2020-04-18 19:52:02
585
原创 证券期货行业数据模型设计
证券期货行业数据模型（以下简称“SDOM”）是以证券期货行业相关法律法规、业务规则、制度及流程等为依据，提取市场全业务流程与数据共性,形成具有通用性、稳定性和扩展性的数据模型。行业数据模型是以“交易”、“监管”、“披露”三大业务线条为切入点，完成对行业各业务的全面遍历。通过对市场中的证券、基金、期货、债券、回购等主要交易行为的梳理形成行业交易模型；通过对已上线及待上线的信息披露项目的逆向梳理形...
2020-04-12 06:57:12
5425
原创 敏捷数仓模型设计
随着敏捷开发的发展，Devops成为每个组织的事实上的标准-我们能否使数仓开发敏捷起来？让我们研究一下数仓的核心，数据建模（主要是Data Vault模型）。 Data Vault模型是否有助于数仓的健壮性和可扩展性？在讨论这些要点之前，这里有一个快速的背景知识。Data Vault是一种建模方法，由Hubs（业务键），Links（关系）和Satellite（上下文）构成，基于这种方法设...
2020-04-09 10:24:04
2321
原创 数据建模简史
数据建模是创建数据模型（物理，逻辑，概念等）的“行为”，包括定义和确定组织的数据需求及其目标。数据建模的行为不仅定义了数据元素，还定义了它们形成的结构以及它们之间的关系。开发数据模型需要架构师（Data Modelers）与企业其他部门密切合作，建立目标，并与信息系统的最终用户建立流程。数据模型包含标准化和组织成模式的“数据元素”（例如，客户的姓名或地址），使得它们彼此相关。使用具体...
2020-04-08 13:21:17
853
原创 数据架构与数据库建模
一、数据架构与数据模型在数据资产化浪潮汹涌而来的时候，数据平台，数据中台，数据湖等平台也成为了企业的数据资产化建设的的‘基建项目’，数据模型是这个基建项目的核心内容之一，贯穿了整个数据架构。数据模型定义了操作者、行为以及管理业务处理流程的规则，并将定义内容用人们和应用程序都能理解的标准语法进行描述。不同技术背景和业务经验的各类人员在讨论数据需求时缺少一种有效的沟通工具，在讨论中经...
2020-04-07 17:21:56
1273
原创 Datablau5.0数据资产管理产品系列重磅发布
过去的一年，在国家积极推动数据基础设施建设，提升行业的数据能力的背景下，以人工智能、大数据、数据中台、数字化转型等需求为驱动的是各行各业的战略重点，作为整个数据战略的基础-数据治理，也越来越受到客户的重视。2020的春季，全国人民团结一心、共同抗疫的非常时期，Datablau团队经过持续不懈的钻研，完成了全新一代数据治理平台5.0的研发。本次产品的升级，吸收了国内外最新的行业趋势和技...
2020-04-04 19:56:29
4204
1
原创 NewSQL数据库数据模型设计
现如今，NewSQL 数据库与关系型数据库往往并存于企业的数据架构中。但是在 NoSQL 的数据管理方面，还缺乏像管理关系型数据那样成熟的方法与工具。当前流行的 NewSQL 数据库在设计时更多地考虑了应用程序的性能，而较少考虑到高层业务模型、数据的集成以及数据的标准化。对于 NewSQL 数据库来说，其数据建模与物理数据之间存在着一条明显的鸿沟。在本文中，将介绍数据建模技术管理 New...
2020-04-01 17:55:38
636
原创 数据仓库模型设计与工具
前言：数据模型对于数仓是最核心的东西，数据模型是数据组织和存储方法，模型的好坏，决定了数仓能支撑企业业务多久。为什么大多数企业，数仓都要重建，这不仅仅是业务拓展、发展迅速，很大一部分是因为模型建的很烂。一、基本概念维度建模，是数据仓库大师Ralph Kimball提出的，是数据仓库工程领域最流行的数仓建模经典。维度建模以分析决策的需求出发构建模型，构建的数据模型为分析需求...
2020-04-01 10:09:57
5673
1
原创 从数据标准到数据库设计：解决基础数据标准落地的最后一公里难题（下）
模型驱动的标准落标方案 1. 落标关键点剖析根据笔者的经验与实践，数据标准的落标需要重点考虑三大问题：问题1. 什么数据需要制定哪些标准问题2. 什么系统落什么标准问题3. 什么人与什么时间执行如果这三个问题没有想清楚，基本数据标准的梳理会停留在Excel层面，标准的政策会停留在墙上，无法走入每个设计者的头脑和每个系统的每个字段。我们先来说第一个问题，什么数据...
2020-03-31 14:48:22
1736
原创 从数据标准到数据库设计：解决基础数据标准落地的最后一公里难题（上）
数据标准概述 定义 数据是由特定的环境产生的，这些环境因素包括生产者，时间，系统等， 这就造成了同一个语义的数据，会有多种不同的定义方法，这给后期进行数据汇集和整合带来障碍，因此，数据处理的前奏就是数据标准化，数据标准作为一个统一的数据共识，在企业的标准化中起到重要作用。数据标准一般包括下面几个，为了统一本文阅读共识，列出如下：基础数据标准，这个标准是针对数据原始定义，一般面向原...
2020-03-31 14:25:22
2272
原创 最流行的三大数据建模工具
越来越多的业务，越来越多的信息化系统，让很多公司拥有了海量数据，但是分散的数据、隔离的系统，又形成了一个个数据孤岛。于是，为了利用好数据，各大公司纷纷建设了数据仓库，或者是最近升级为大数据平台之类的，但是，不同条线不同场景的数据又要如何整合到同一个仓库呢？数据模型就此应运而生，通过高度抽象的数据模型，整合各个源系统的数据，最终形成统一、规范、易用的数据仓库，进而提供包括数据集市、数据挖掘...
2020-03-24 18:05:37
9578
2
Datablau DDM 5.5 数据建模工具
2019-08-09
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人