数据治理
文章平均质量分 75
半_调_子
因为热爱
展开
-
名词解释1
用计算机辅助求解分析复杂工程和产品的结构力学性能,以及优化结构性能等,把工程(生产)的各个环节有机地组织起来,实现有关信息集成,使其产生并存在于工程(产品)的整个生命周期。指一种基于互联网提供软件服务的应用模式。通过综合考虑产能、工装、设备、人力、班次、工作日历、模具、委外资源、加工批次等约束,在有限产能条件下,实现产能精确预测、工序生产与物料供应最优计划等。指基于运输作业流程的统一调度管理平台,能实现客户、车辆、人员的信息管理,订单处理、调度配载、运输跟踪的运输作业,以及费用、收付款的财务管理。原创 2022-11-20 23:53:19 · 211 阅读 · 0 评论 -
Apache hudi
Apache hudi 第一代流式数据湖平台本次课程分为:Hudi基础入门、Hudi集成进阶篇和Hudi实战案例篇hudi基础入门篇主要讲解hudi框架概述、快速使用hudi及基础概念学习收获:了解什么是数据湖、为什么使用hudi,及hudi的如何管理数据和基本概念理解。hudi应用进阶篇:主要讲解hudi与spark整合与flink整合,数据流式存储分析。学习收获:如何在企业中使用hudi,尤其与spark和flink集成,无论是流式存储还是离线分析计算。hudi实战案例:主要讲解实际案原创 2022-04-29 16:13:08 · 365 阅读 · 0 评论 -
kettle基本概念
本章主要讲述kettle的基本概念,我们需要了解kettle工具本身的一些设计原则,以及kettle里的不同功能模块。首先讲述如何通过转换,以数据行的形式来处理数据,然后解释如何使用作业以工作流形式将转换连接起来。本章要讲述如下的kettle概念:数据库连接工具和常用程序资源库虚拟文件系统参数和变理可视化编程设计原则kettle工具在设计初始就考虑一些设计原则,这些原则也借鉴了以前使用过的其他一些etl工具积累下的经验和教训。先总结一下以前的经验,看我们能从中获得哪些有益原创 2021-04-18 17:16:01 · 2178 阅读 · 0 评论 -
ETL分析
本章的内容是数据整合工作的起点,本章将详细解释3种主要的数据整合方式不同点和相似点。这3种数据的整合方式分别是etl,elt和eii。为了能够全面理解数据仓库和数据整合,我们先来看看事务数据库系统和分析型系统不同不处。1.1 OLTP和数据仓库对比人们通常的第一个问题是事务系统和商业智能系统的区别,商业智能系统通常也被称为决策支持系统dss,一个独立的事务系统通常也被称为在线事务处理系统事务系统需要能哆快速地定位到一条记录。当一次需要获取多条记录,多条记录通常使用唯一的健值加以识别。例如订单系..原创 2021-04-17 00:26:30 · 2731 阅读 · 0 评论 -
知识图谱与数据治理
本方案主要使用从被动管控向主动服务转型,依托嵌入式与微服务提供治理能力。构建数据治理图谱,实现治理能力的赋能应用。打造端到端实时数据审计能力,形成数据链路全程保障。提供实时治理能力,支持复杂分布式实时计算框架下的数据资产管理诉求,并通过图形化业务编排能力,实现,离线、实时一体化数据治理与敏捷运维。微服务组件依托数据治理的基础功能框架,将核心公共能力进行封装,形成标准化的服务...原创 2019-06-05 23:51:53 · 6888 阅读 · 1 评论