自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(1419)
  • 资源 (42)
  • 收藏
  • 关注

原创 深入浅出理解kafka原理相关技术博客汇总

深入浅出理解kafka原理相关技术博客汇总文章内容链接CentOS7搭建Kafka2.7分布式集群CentOS7搭建Kafka2.7分布式集群Kafka操作命令Kafka操作命令分布式消息队列Kafka原理分布式消息队列Kafka原理新版Kafka Manager CMAK安装的详细文档新版Kafka Manager CMAK安装的详细文档CentOS7安装kafka-managerCentOS7安装kafka-manager通信原理和认识kaf

2021-12-17 18:51:34 849

原创 Pandas和Spark知识汇总

Spark开发汇总文章内容链接pyspark之DataFrame操作大全pyspark之DataFrame操作大全pandas数据处理—Series、DataFrame对象pandas数据处理—Series、DataFrame对象Pandas数据处理—Series、DataFrame对象索引Pandas数据处理—Series、DataFrame对象索引Pandas数据处理—清理、转换、合并、重塑Pandas数据处理—清理、转换、合并、重塑pyspark读

2021-01-03 23:16:00 671 1

原创 Linux常用命令详解和服务器知识汇总

Linux常用命令详解和服务器知识汇总文章内容链接linux常用命令详解(持续更新) linux常用命令详解(持续更新)ShellShellShell编程Shell编程linux知识点linux知识点redhat7配置本地yum源和阿里源redhat7配置本地yum源和阿里源...

2021-01-01 21:08:38 356

原创 Docker容器原理详解和实战应用

Docker容器原理详解和实战应用文章内容链接Docker核心原理,Docker在线安装和离线安装Docker核心原理,Docker在线安装和离线安装Docker 安装mysql5.7Docker 安装mysql5.7Docker 使用Dockerfile创建镜像Docker 使用Dockerfile创建镜像Docker 镜像和容器Docker 镜像和容器Docker修改国内镜像源,同时搭建本地私有镜像仓库,配置其他docker服务器从私有镜像仓库拉取镜

2021-01-01 20:54:29 276

原创 Spark、HDFS、YARN、Zookeeper、Kafka、Hive、HBase等原理详解

Spark、HDFS、YARN、Zookeeper、Kafka、Hive、HBase等原理详解文章内容链接分布式文件系统HDFS基本原理分布式文件系统HDFS基本原理计算引擎Spark基本原理计算引擎Spark基本原理分布式协调服务ZooKeeper原理分布式协调服务ZooKeeper原理分布式消息队列Kafka原理分布式消息队列Kafka原理Hive与Spark SQL原理详解Hive与Spark SQL原理详解分布式列簇式存储系统HBase原

2021-01-01 20:10:10 761

原创 Python基础知识汇总和应用示例

Python基础知识汇总和应用示例文章内容链接python库下载网站python库下载网站python读取csv文件python读取csv文件Python3基础知识:三元表达式、元祖、sort函数、sorted函数、enumerate函数、zip函数、del函数、pop函数、update函数、字典Python3基础知识:三元表达式、元祖、sort函数、sorted函数、enumerate函数、zip函数、del函数、pop函数、update函数、字典python

2021-01-01 14:12:51 1778 1

原创 Kettle详细使用教程

Kettle详细使用教程文章内容链接Kettle 插入更新、自定义常量数据与删除、增加常量、增加序列Kettle 插入更新、自定义常量数据与删除、增加常量、增加序列Kettle字段选择、剪切字符串、字符串替换、Concat fields、字符串操作Kettle字段选择、剪切字符串、字符串替换、Concat fields、字符串操作Kettle 排序记录、去除重复记录、拆分字段、值映射、替换NULL值Kettle 排序记录、去除重复记录、拆分字段、值映射、替换NULL值

2021-01-01 13:19:24 693

原创 Scala基础知识汇总和应用示例

Scala基础知识汇总和应用示例文章内容链接Scala连接Mysql数据库和Sqlserver数据库,增量抽取数据存储到Hive数据库Scala连接Mysql数据库和Sqlserver数据库,增量抽取数据存储到Hive数据库Scala语法之变量和数据类型Scala语法之变量和数据类型Scala语法之if…else、for循环、while循环、Break和ContinueScala语法之if…else、for循环、while循环、Break和ContinueSca

2021-01-01 13:10:51 142

原创 Java基础知识汇总

Java基础知识汇总文章内容链接Java从入门到精通 第一章 初识JavaJava从入门到精通 第一章 初识JavaJava从入门到精通 第二章 开发工具IDEA使用教程Java从入门到精通 第二章 开发工具IDEA使用教程Java从入门到精通 第三章 Java语言基础Java从入门到精通 第三章 Java语言基础Java从入门到精通 第四章流程控制Java从入门到精通 第四章流程控制Java从入门到精通 第五章字符串Java从入门到精通 第五章字符串

2021-01-01 12:47:58 135

原创 SQL Server语法大全和函数使用方法汇总

SQL Server函数大全和使用方法汇总文章内容链接SQL Server 2019 Linux安装教程SQL Server 2019 Linux安装教程SQL Server 2019 Windows安装教程SQL Server 2019 Windows安装教程SQLServer变量、流程控制、嵌套查询SQLServer变量、流程控制、嵌套查询SQLServer日期相关函数SQLServer日期相关函数 GETDATE、DATEADD、DATEDIFF、DAT

2021-01-01 12:13:22 475

原创 ELK集群搭建和使用详解:filebeat、Logstash、Kibana、Elasticsearch

ELK集群搭建和使用详解:filebeat、Logstash、Kibana、Elasticsearch文章分类链接服务器环境服务器环境搭建filebeatCentOS7下安装filebeat-7.3filebeatwindows下安装filebeat-7.3.2LogstashCentOS7下安装Logstash-7.3.2Logstashwindows下安装Logstash-7.3.2LogstashLogstash配置文件语法Logs

2020-12-18 11:32:52 209

原创 大数据集群搭建:安装部署MySQL、SQL Server、Zookeeper、Hadoop、Spark、Flink、Kafka、Kettle、Airflow、Flume、Zeppelin集群

大数据集群搭建:安装部署mysql、sqlserver、Zookeeper、Hadoop、Spark、Flink、Kafka、kettle、airflow集群文章分类链接大数据集群环境搭建大数据集群环境搭建:Hadoop、Spark、Flink分布式集群环境mysql5.7mysql5.7数据库主从同步、双机热备、读写分离高可用集群的实现mysql5.7CentOS7离线安装mysql5.7.32mysql8CentOS7离线安装mysql-8.0.19

2020-12-18 11:08:38 897

原创 大数据集群环境搭建:Hadoop、Spark、Flink分布式集群环境

Centos7上搭建hadoop3.2.1分布式集群一、安装虚拟机VMware Workstation安装CentOS7.4服务器:https://blog.csdn.net/zhengzaifeidelushang/article/details/102557805准备三台CentOS7服务器,三台服务器主机名和IP地址如下:主机名IP地址bigdata1192.168.239.131bigdata2192.168.239.132bigdata3192.16

2020-04-08 16:00:59 1043 1

原创 Debezium报错处理系列之七十:requested WAL segment 00000001000002100000005C has already been removed

Debezium报错处理系列之七十:requested WAL segment 00000001000002100000005C has already been removed

2023-06-03 12:52:11 9

原创 Debezium系列之:使用分区路由指定表的字段,把指定字段具有相同值的增删改数据始终分发到Kafka Topic的相同分区

Debezium系列之:使用分区路由指定表的字段,把指定字段具有相同值的增删改数据始终分发到Kafka Topic的相同分区

2023-06-03 12:43:43 67

原创 Oracle数据库从入门到精通系列之十五:NUMBER类型

指定小数位数位2,精度为5时,小数点左边最多只能有3位,右边有2位,因此这个数不满足精度要求。精度和小数位数根本不会影响数据在磁盘上如何存储,只会影响允许有哪些值以及数值如何舍入。NUMBER类型是一个变长数据类型,在磁盘上会占用0~22字节的存储空间。在此P和S是可选的,分别用于指定以下两个方面。在这个例子,NUM_COL列不允许多于5位。小数位数可以用于控制数值的舍入。

2023-06-02 15:11:34 5

原创 Debezium系列之:Debezium2.X之PostgreSQL数据库的Debezium连接器

PostgreSQL 的逻辑解码特性是在 9.4 版本中引入的。它是一种允许提取提交给事务日志的更改并借助输出插件以用户友好的方式处理这些更改的机制。输出插件使客户端能够使用更改。一个逻辑解码输出插件。可能需要安装选择使用的输出插件。在运行 PostgreSQL 服务器之前,必须配置一个使用选择的输出插件的复制槽。插件可以是以下之一:decoderbufs基于 Protobuf 并由 Debezium 社区维护。pgoutput是PostgreSQL 10+标准的逻辑解码输出插件。

2023-06-01 23:59:23 156

原创 Oracle数据库从入门到精通系列之十四:CHAR、VARCHAR2、NCHAR和NVARCHAR2

不论在表段还是索引段中,CHAR都会占用最大的存储空间,这就够糟糕了,避免使用CHAR/NCHAR类型还有另外一个很重要的原因:CHAR/NCHAR类型还会给使用这些数据的应用带来混乱,原因与字符串的比较的规则有关,也与执行字符串比较多严格程度有关。使用诸如UTF-8的多字节字符集时,建议在VARCHAR2/CHAR定义中使用CHAR修饰符,也就是说使用VARCHAR2(80 CHAR),而不是VARCHAR2(80),因为是要定义一个实际上能存储80字符数据的列。

2023-05-30 11:47:01 17

原创 Oracle数据库系列之十三:详细整理Oracle数据库的数据类型

显然以上列表中还少了许多类型,如INT、INTEGRE、SMALLINT、FLOAT、REAL等。这些类型实际上都是在上表所列的某种基本类型的基础上实现的,另外,XML Type、SYS.ANYTYPE和SDO_GEOMETRY之类的类型在此也未列出,它们是一些复杂的对象类型,包括一个属性集合以及处理这些属性的一些方法(函数)。这些复杂类型由上述基本数据类型组成,并不是传统意义上真正的数据类型,而只是你在应用中可以利用的一种实现或一组功能。

2023-05-30 09:58:54 338

原创 Oracle数据库从入门到精通系列之十二:段

Oracle数据库从入门到精通系列之十二:段

2023-05-28 10:29:09 726

原创 Oracle数据库从入门到精通系列之十:基于Docker部署Oracle数据库19c的详细步骤

Oracle数据库从入门到精通系列之十:基于Docker部署Oracle数据库19c的详细步骤

2023-05-28 10:21:51 445

原创 Oracle数据库从入门到精通系列之十一:Oracle创建数据库的详细步骤

Oracle数据库从入门到精通系列之十一:Oracle创建数据库的详细步骤

2023-05-28 10:15:35 456

原创 Debezium报错处理系列之六十七:TopicAuthorizationException: Not authorized to access topics

Debezium报错处理系列之六十七:TopicAuthorizationException: Not authorized to access topics

2023-05-27 20:00:00 1017

原创 Oracle数据库从入门到精通系列之九:Oracle数据库表

Oracle数据库从入门到精通系列之九:Oracle数据库表

2023-05-27 19:30:00 896

原创 Debezium报错处理系列之六十九:Can‘t compare binlog filenames with different base names

Debezium报错处理系列之六十九:Can't compare binlog filenames with different base names

2023-05-27 19:15:00 1091

原创 Debezium报错处理系列之六十八:No resolvable bootstrap urls given in bootstrap.servers

Debezium报错处理系列之六十八:No resolvable bootstrap urls given in bootstrap.servers

2023-05-27 19:00:00 887

原创 SQL Server数据库从入门到精通系列之一:压缩ldf文件

SQL Server数据库从入门到精通系列之一:压缩ldf文件

2023-05-26 22:05:14 30

原创 Oracle数据库从入门到精通系列之八:控制文件

控制文件是一个相当小的文件,存储了数据库需要的一些文件的位置。数据库启动时,实例会从参数文件中知道控制文件的位置,而通过控制文件会知道数据库的数据文件和在线重做日志文件的位置。每个数据库都应该有多个控制文件的副本,而且它们应该保存在不同的磁盘上,以防止出现故障而丢失控制文件。控制文件应该通过硬件(RAID)多路保存,如果硬件条件不支持,则要通过Oracle自身多路保存。

2023-05-26 21:58:32 16

原创 Oracle数据库从入门到精通系列之七:闪回日志

想把数据库恢复到以前的某个时间点需要一个很耗时并且复杂的流程。引入FLASHBACK DATABASE这个命令后,可以大大简化并加快这个流程。闪回日志包含数据块被修改之前的映像,用于将数据库返回到之前某个时间点的状态。

2023-05-26 21:56:48 16

原创 Oracle数据库从入门到精通系列之六:临时文件

一般而言对数据的每一个修改都会存储在重做日志中,这些事物日志会在以后某个时间重新应用以重做事务。例如,数据库实例失败后进行恢复就可能需要重做事务。DBA不需要备份临时数据文件,无法恢复临时数据文件。

2023-05-26 21:53:17 14

原创 Debezium系列之:Debezium2.X之Oracle数据库的Debezium连接器

Debezium 的 Oracle 连接器捕获并记录在 Oracle 服务器上的数据库中发生的行级更改,包括在连接器运行时添加的表。可以将连接器配置为针对模式和表的特定子集发出更改事件,或者忽略、屏蔽或截断特定列中的值。Debezium 通过使用本机 LogMiner 数据库包或XStream API从 Oracle 获取更改事件。虽然该连接器可能适用于各种 Oracle 版本,但只有 Oracle EE 12 和 19 已经过测试。Oracle数据库实战链接后续会补上。

2023-05-26 21:50:52 1599

原创 Oracle数据库从入门到精通系列之五:数据文件

其中一个对应SYSTEM表空间(存放Oracle的数据字典),一个对应SYSAUX表空间(在10g及以上版本中,非字典对象都存储在这个表空间中),最后一个对应USER表空间。数据库由一个或多个表空间构成。表空间是Oracle中的一个逻辑存储容器,位于存储层次体系的顶层,包括一个或多个数据文件。用最简单的CREATE DATABASE命令根据默认设置创建了一个数据库,这个数据库中有三个数据文件。一个段由一个或多个区段组成,区段则由连续分配的一些块组成。块结构:首部、表目录、行目录、空闲空间、数据、尾部。

2023-05-26 21:47:18 768

原创 Oracle数据库从入门到精通系列之四:重做日志文件

当数据库修改块(比如说更新块上的一行)时,这些修改会在内存中完成,它会修改高速缓存内的数据块,与此同时,数据库也会把重做这些修改所需的信息保存在重做日志缓冲区(redo log buffer)中。在Oracle数据库中完成的所有操作都会生成redo,并写入到在线重做日志文件中。例如,创建索引后,数据库将向SYS.OBJ$表中插入一行,以表示索引存在数据库中,这个插入动作会记入日志,以后如果表上有插入、更新和删除等操作,那么相应的索引的维护动作也会记入日志,但是最初写入磁盘的创建索引的操作不会记入日志中。

2023-05-26 21:40:54 602

原创 Debezium系列之:Debezium镜像仓库Quay.io,使用Debezium镜像仓库的方法和案例

Debezium系列之:Debezium镜像仓库Quay.io,使用Debezium镜像仓库的方法和案例

2023-05-20 09:52:26 517

原创 基于Docker部署Starrocks数据库

基于Docker部署Starrocks数据库

2023-05-19 06:28:25 181

原创 Debezium系列之:数据库方言dialects的理解

Debezium系列之:数据库方言dialects的理解

2023-05-19 06:13:29 21

原创 Debezium报错处理系列之六十六: java.sql.SQLException: Incorrect string value: ‘\xE5\x80\xA9\xE5\x80\xA9...‘ for

Debezium报错处理系列之六十六: java.sql.SQLException: Incorrect string value:'\xE5\x80\xA9\xE5\x80\xA9...' for column 'name' at row 1

2023-05-07 09:46:05 79 1

原创 Debezium报错处理系列之六十五:Debezium JDBC connector无法支持mysql字段默认值为DEFAULT CURRENT_TIMESTAMP的解决方法

Debezium报错处理系列之六十五:Debezium JDBC connector无法支持mysql字段默认值为DEFAULT CURRENT_TIMESTAMP的解决方法

2023-05-07 09:14:19 40

原创 Kafka系列之:Unexpected handshake request with client mechanism PLAIN, enabled mechanisms are []

Kafka系列之:Unexpected handshake request with client mechanism PLAIN, enabled mechanisms are []

2023-05-06 18:30:38 104 1

原创 Debezium系列之:使用正则表达式路由器修改表级别Topic名称

Debezium系列之:使用正则表达式路由器修改表级别Topic名称

2023-05-04 11:26:05 403 1

蜗杆工程图.DWG

蜗杆工程图.DWG

2022-11-29

labview数据采集系统

通过采集卡采集N路信号,并对这N路信号进行预处理(滤波、FFT等),最后能将处理后的信号进行存储。信号类型为模拟信号,来源为传感器,传感器种类不限,可采集多种传感器信号

2022-10-09

python操作Elasticsearch数据库.docx

python操作Elasticsearch数据库

2021-10-26

CentOS7下启动logstash报错.docx

CentOS7下启动logstash报错

2021-10-26

CentOS7下搭建多节点Elasticsearch集群.docx

CentOS7下搭建多节点Elasticsearch集群

2021-10-26

CentOS7下安装Kafka集群.docx

CentOS7下安装Kafka集群.docx

2021-10-26

CentOS7搭建Zookeeper集群.docx

CentOS7搭建Zookeeper集群

2021-10-26

CentOS7安装kafka-manager.docx

CentOS7安装kafka-manager详细文档

2021-10-26

【电气控制与PLC】习题、测试题及答案.doc

电气控制与PLC,习题、测试题、答案

2021-10-26

论基于构件的软件开发.docx

论基于构件的软件开发,软考高级系统架构师

2021-10-26

论分布式数据库的集成.docx

论分布式数据库的集成,软考系统架构师

2021-10-26

论SOA在企业集成架构设计中的应用.docx

论SOA在企业集成架构设计中的应用,软考系统架构师

2021-10-26

论SOA面向服务架构技术的应用.docx

软考系统架构师,论SOA面向服务架构技术的应用

2021-10-26

论分布式数据库的设计和实现.docx

软考高级系统架构师论文

2021-10-25

Flask-learn.zip

flask框架完整的模版代码

2021-09-21

install_python_package.zip

ansible一条命令实现往服务器集群安装python包

2021-09-10

auto_deploy_python3.7.9.zip

ansible一条命令自动化部署python3

2021-09-10

PMP第十三章:项目相关方管理.docx

项目相关方管理知识总结

2021-08-13

PMP第十二章:项目采购管理.docx

项目采购管理知识总结

2021-08-13

PMP第十一章:项目风险管理.docx

项目风险管理知识总结

2021-08-13

PMP第十章:项目沟通管理.docx

PMP第十章:项目沟通管理知识点提炼总结

2021-08-12

PMP第九章:项目资源管理.docx

PMP第九章:项目资源管理知识点总结提炼

2021-08-12

PMP第八章:项目质量管理.docx

PMP第八章:项目质量管理知识点总结提炼

2021-08-12

PMP第七章:项目成本管理.docx

PMP第七章:项目成本管理知识总结提炼

2021-08-11

PMP第六章:项目进度管理.docx

PMP第六章:项目进度管理知识总结提炼

2021-08-11

PMP第五章:项目范围管理.docx

PMP第五章:项目范围管理知识点总结提炼

2021-08-11

PMP第四章:项目整合管理.docx

PMP第四章:项目整合管理知识总结

2021-08-10

PMP:五大过程组与十大知识领域.docx

PMP:五大过程组与十大知识领域总结

2021-08-10

PMP第三章:项目经理的角色.docx

PMP第三章:项目经理的角色知识点提炼

2021-08-10

PMP第二章:项目运行环境.docx

PMP第二章知识总结

2021-08-09

PMP第一章.docx

PMP第一章知识内容提炼汇总

2021-08-09

Java基础知识面试题系列三.docx

Java基础知识面试题

2021-08-09

auto-upload-service.tar.gz

ansible上传多个文件到服务器集群

2021-08-06

Java基础知识面试题系列二.docx

Java基础知识面试题详细总结

2021-08-03

Java基础知识面试题系列一.docx

Java基础面试题

2021-08-02

ansible-flume-auto-deployment.tar.gz

ansible自动部署flume集群组成消费组共同消费kafka集群Topic,压缩包包含了详细的ansible部署代码、编译好的flume压缩包、以及生产环境flume参数设置,可以私信请教我,详细指导讲解

2021-07-28

apache-flume-1.9.0-bin.tar.gz

编译好的flume1.9.0,下载安装即可使用

2021-07-28

一套基于flask+layui开发的前后端源码

一套基于flask+layui开发的前后端源码,修改了部分layui源码

2021-07-28

wal2json.so

postgresql数据库日志解析插件

2021-07-27

flink-shaded-hadoop-3-uber-3.1.1.7.1.1.0-565-9.0.jar

Flink-1.11.2与Hadoop3集成JAR包,放到flink安装包的lib目录下,可以避免Caused by: org.apache.flink.core.fs.UnsupportedFileSystemSchemeException: Hadoop is not in the classpath/dependencies.这个报错,实现Flink与Hadoop的集成

2020-11-16

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除