自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

承缘丶

中华好公民之一的博客

  • 博客(142)
  • 资源 (13)
  • 收藏
  • 关注

原创 华为数据之道第四部分导读

随着以算法、算力和数据为基础的人工智能的发展和广泛应用,我们可以认为出现了第四个世界——“机器认知世界”,即基于大量数据,各种人工智能“机器”按照各自的算法对映射到数字世界中的事物进行认知,其认知结论会直接影响人类的决策和行动,如流行的购物网站的智能推荐、汽车自动驾驶的智能判断、股票交易员数据处理分析的智能助手等。第四部分为第10章。基于对华为公司数字化转型的解读,我们建立了数据综合治理体系,发布了信息架构,构建了数据湖、数据底座,打造了数据感知、安全合规能力,提升了数据质量。

2024-05-08 20:00:00 678

原创 华为数据之道第三部分导读

华为数据质量指“数据满足应用的可信程度”,从以下六个维度对数据质量进行描述。1)完整性:指数据在创建、传递过程中无缺失和遗漏,包括实体完整、属性完整、记录完整和字段值完整四个方面。完整性是数据质量最基础的一项,例如员工工号不可为空。2)及时性:指及时记录和传递相关数据,满足业务对信息获取的时间要求。数据交付要及时,抽取要及时,展现要及时。数据交付时间过长可能导致分析结论失去参考意义。3)准确性:指真实、准确地记录原始数据,无虚假数据及信息。数据要准确反映其所建模的“真实世界”实体。

2024-05-08 19:45:00 883

原创 华为数据之道第二部分导读

数据服务是基于数据分发、发布的框架,将数据作为一种服务产品来提供,以满足客户的实时数据需求,它能复用并符合企业和工业标准,兼顾数据共享和安全。1)分析数据服务需求:通过数据需求调研与需求交接,判断数据服务类型(面向系统或面向消费)、数据内容(指标/维度/范围/报表项)、数据源与时效性要求。2)识别可重用性:结合数据需求分析,通过数据服务中心匹配已有的数据服务,判断以哪种方式(新建服务、直接复用、服务变更)满足业务需求。对于已有数据服务,必须使用服务化方式满足需求,减少数据“搬家”。3。

2024-05-08 19:30:00 922

原创 华为数据之道第一部分导读

目录导读第一部分序第1章 数据驱动的企业数字化转型非数字原生企业的数字化转型挑战业态特征:产业链条长、多业态并存运营环境:数据交互和共享风险高IT建设过程:数据复杂、历史包袱重数据质量:数据可信和一致化的要求程度高华为数字化转型与数据治理华为数字化转型整体目标华为数字化转型蓝图及对数据治理的要求华为数据治理实践华为数据治理历程1. 第一阶段:2007~2016年2. 第二阶段:2017年至今华为数据工作的愿景与目标华为数据工作建设的整体

2024-05-08 19:15:00 974

原创 18(第十七章,数据管理和组织变革管理)

数据管理和组织变革管理,资料来源于DAMA-DMBOK

2024-04-27 17:57:35 241

原创 17(第十六章,数据管理组织与角色期望)

数据管理组织与角色期望,资料来源于DAMA-DMBOK

2024-04-26 13:27:15 248

原创 16(第十五章,数据管理成熟度评估)

数据管理成熟度评估,资料来源于DAMA-DMBOK

2024-04-26 13:07:11 336

原创 15(第十四章,大数据和数据科学)

大数据和数据科学,资料来源于DAMA-DMBOK

2024-04-26 12:48:16 601 1

原创 14(第十三章,数据质量)

数据质量,资料来源于DAMA-DMBOK

2024-04-25 23:22:38 773

原创 13(第十二章,元数据管理)

元数据管理,资料来源于DAMA-DMBOK

2024-04-25 19:52:11 899

原创 12(第十一章,数据仓库和商务智能)

数据仓库和商务智能,资料来源于DAMA-DMBOK

2024-04-25 19:51:38 773

原创 11(第十章,参考数据和主数据)

参考数据和主数据,资料来源于DAMA-DMBOK

2024-04-25 19:41:56 1062 1

原创 10(第九章,文件和内容管理)

文件和内容管理,资料来源于DAMA-DMBOK

2024-04-25 19:41:18 229

原创 9(第八章,数据集成和互操作)

数据集成和互操作,资料来源于DAMA-DMBOK

2024-04-25 19:40:36 628

原创 8(第七章,数据安全)

数据安全,资料来源于DAMA-DMBOK

2024-04-25 13:07:39 721

原创 7(第六章,数据存储和操作)

数据存储和操作,资料来源于DAMA-DMBOK

2024-04-24 20:49:02 980

原创 6(第五章,数据建模与设计)

数据建模与设计,资料来源于DAMA-BMBOK

2024-04-24 19:53:22 665

原创 5(第四章,数据架构)

数据架构,资料来源于DAMA-DMBOK

2024-04-24 13:45:18 550

原创 4(第三章,数据治理)

数据治理,资料来源于DAMA-DMBOK

2024-04-23 22:51:12 742

原创 3(第二章,数据处理伦理)

DAMA数据处理伦理,资料来源于DAMA-DMBOK

2024-04-23 21:52:53 276

原创 2(第一章,数据管理)

数据管理简介,资料来源于DAMA-DMBOK

2024-04-23 21:50:49 1166

原创 ETL简介以及使用ETL(Kettle)进行数据接入的具体例子

ETL简介业务表梳理以及接入规划数据接入中的方便工具数据治理实操训练

2024-04-23 13:27:47 1041

原创 SQL基础(关系模型)

SQL及定义域概念关系简介关系模型简介运算基础

2024-04-23 12:39:47 1191

转载 图数据库Neo4j详解

图数据库Neo4j详解

2024-04-22 22:29:21 95

转载 读过本文才算真正了解Cassandra数据库

了解Cassandra数据库

2024-01-22 20:00:00 124

原创 PowerDesigner简介以及简单使用

使用PowerDesigner新建模型形成SQL脚本

2024-01-10 22:00:00 882

原创 Spark Streaming简介与代码实例

为了更好理解流式计算思想,我们来举例一个更具体的流式计算的程序。

2024-01-03 08:30:00 1879

原创 GaussDB的自定义hash函数

GaussDB的自定义hash函数

2024-01-02 10:45:21 385

原创 GaussDB获取视图DDL语句的函数

GaussDB获取视图DDL语句的函数

2024-01-02 10:33:59 639

原创 拉链表的自动处理函数

拉链表的自动处理函数,参考

2023-12-29 13:45:00 338

原创 通过MySQL删除Hive元数据信息

之前遇到过一个问题,在进行Hive的元数据采集时,因为Hive表的文件已经被删除了,当时是无法删除表,导致元数据采集也发生了问题,所以希望通过删除Hive表的元数据解决上述问题。之前安装时,经过特定的配置后,Hive上所有元数据均保存在Mysql中,所以可以从Mysql上删除表相关信息即可删除hive表,而且不会影响Hdfs上数据。6、验证表hive中表是否还存在,即是否删除成功。2、备份Hive的元数据库;3、删除备份表的外键信息;5、将删除的外键添加。

2023-08-03 15:02:38 1162

转载 Oracle递归查询connect by用法

Oracle中可以通过子句来实现SQL的层次查询。自从Oracle 9i开始,可以通过函数实现将父节点到当前行内容以“path”或者层次元素列表的形式显示出来。自从Oracle 10g 中,还有其他更多关于层次查询的新特性。例如,有的时候用户更关心的是每个层次分支中等级最低的内容。那么你就可以利用伪列函数来判断当前行是不是叶子。如果是叶子就会在伪列中显示“1”, 如果不是叶子而是一个分支(例如当前内容是其他行的父亲)就显示“0”。

2023-07-27 15:14:58 292

转载 Yarn WebUI使用各指标详解

Yarn WebUI使用各指标详解

2023-06-13 11:31:36 904

原创 Scrum

Scrum 是一个轻量的框架,它通过提供针对复杂问题的自适应解决方案来帮助人们、团队和组织创造价值,Scrum 是用于管理产品开发的单个团队过程框架。该框架包含 Scrum 角色、事件、工件和规则,采用迭代方法来交付工作产品。Scrum 团队一般由 5 到 9 个(7±2)团队成员组成。有三种类型角色:产品负责人(PO,Product Owner):产品负责人定义项目愿景、需求和优先级,对产品成功负责。负责团队,并移除障碍,帮助他们实现产品负责人所设定的目标。

2023-04-17 17:55:32 771 1

转载 TCP、HTTP、HTTPS、SOCKET、SOCKET连接池

TCP、HTTP、HTTPS、SOCKET、SOCKET连接池

2022-10-19 22:47:57 279

转载 Spark SQL与Hive SQL解析执行流程

Spark SQL与Hive SQL解析执行流程记录

2022-10-07 15:25:48 1263

原创 Nginx日志设置

Nginx日志设置

2022-10-03 15:35:35 9698

原创 入门版Linux上恢复误删除的文件

入门版Linux上恢复误删除的文件

2022-10-02 14:25:18 3039

原创 ELK简介

ELK是三个开源软件的缩写,分别是Elasticsearch、Logstash、Kibana,后来又新加了一个FileBeat

2022-09-05 22:44:53 4509

转载 MySQL GTID介绍

GTID介绍,搭建主备环境,测试复制的故障转移,复制错误跳过。

2022-08-28 17:16:15 4157

数据库密码解密Jar包

数据库密码解密Jar包。为符合数据安全,针对数据库密码进行加密以防止数据库密码明文展示而引发的安全隐患。

2022-08-16

数据库密码加密Jar包

数据库密码加密Jar包。为符合数据安全,针对数据库密码进行加密以防止数据库密码明文展示而引发的安全隐患。

2022-08-16

(Hive输出)pentaho-big-data-kettle-plugins-hive-6.1.0.1-196

(Hive输出)ETLDesigner\common\system\karaf\system\pentaho\pentaho-big-data-kettle-plugins-hive\6.1.0.1-196\下的文件。 (Hive输出)pentaho-big-data-kettle-plugins-hive-6.1.0.1-196。

2022-07-24

rpm包安装htpasswd所需包

rpm包安装htpasswd所需包rpm包安装htpasswd所需包rpm包安装htpasswd所需包rpm包安装htpasswd所需包rpm包安装htpasswd所需包rpm包安装htpasswd所需包rpm包安装htpasswd所需包rpm包安装htpasswd所需包rpm包安装htpasswd所需包rpm包安装htpasswd所需包rpm包安装htpasswd所需包rpm包安装htpasswd所需包rpm包安装htpasswd所需包rpm包安装htpasswd所需包rpm包安装htpasswd所需包rpm包安装htpasswd所需包rpm包安装htpasswd所需包rpm包安装htpasswd所需包rpm包安装htpasswd所需包rpm包安装htpasswd所需包rpm包安装htpasswd所需包rpm包安装htpasswd所需包rpm包安装htpasswd所需包rpm包安装htpasswd所需包rpm包安装htpasswd所需包rpm包安装htpasswd所需包rpm包安装htpasswd所需包rpm包安装htpasswd所需包rpm包安装htpasswd所需包rpm包

2022-06-12

表结构-副本.xls(文章:《根据Excel记录生成Mysql和Hive建表语句》使用)

根据Excel记录生成Mysql和Hive建表语句

2022-01-11

Postman拷贝下来的代码调通的依赖包.zip

Postman拷贝下来的代码调通的依赖包.zip

2021-12-17

配置好的kafka_2.12-2.8.0 + SCRAM-SHA-256

配置好的kafka_2.12-2.8.0 + SCRAM-SHA-256,打开修改少量配置即可用

2021-12-02

msyh.zip(msyh.ttf)(12(PHP图像的制作,例如验证码)配套一字体)

12(PHP图像的制作,例如验证码)配套一字体

2021-11-16

jar包.zip(Nginx的Session一致性,使用memcached解决所需要的jar包)

Nginx的Session一致性,使用memcached解决所需要的jar包

2021-10-26

HttpServer,用于数据接收

接收客户传来的数据,因为客户只有http的客户端,这个是自备的Http的服务端接收数据。

2021-10-19

daojishi.html

计时+事件倒计时网页:讨女朋友欢心专用配套的html网页代码

2021-07-04

KeePass-2.44-Setup+Chinese.zip

Keepass2.44的安装包和中文语言包,放到了一起,为了方便下载,因为是找的免费资源,所以免费,随着时间(2020-4-19),不一定是最新版本。

2020-04-19

com.js《一个炫酷的个人页面(类Linux命令行界面)》com.js

博客名字为《一个炫酷的个人页面(类Linux命令行界面)》,请参照这其中的内容下载,因为是开源,未经过修改,所以免费。

2020-04-13

一个炫酷的个人页面.zip

炫酷的个人界面,主要使用js实现,这个是我文章博客的附件。博客名字为:《一个炫酷的个人页面(类Linux命令行界面)》

2020-04-13

tools-1.8.0.jar

jdk.tools(1.8)包,上传此资源初衷是为了解决maven项目报相关的错误,亲试可以使用解决问题,资源也是在网络上找到的,所以免费

2020-04-12

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除