m0_37559973-CSDN博客

原创 OceanBase：04-单机在线转分布式部署

OceanBase 数据库为单机分布式一体化架构，支持单机在线转分布式部署。当数据库集群部署在一个机房(Zone)的多台服务器(OBServer)时，实现服务器级别容灾。当集群的服务器在一个地区的多个机房中时，能够实现机房级别容灾。当集群的服务器在多个地区的多个机房中时，能够实现地区级别容灾。

2023-11-22 14:11:42 835

原创 OceanBase：OBServer节点管理

ceanBase 数据库是单进程软件，进程名为 observer。通常一台物理或者虚拟服务器运行一个 observer 进程，由 IP 和端口作为唯一标识，称之为节点。

2023-11-21 14:17:57 1521

原创 OceanBase：集群常见操作

OceanBase 数据库（OceanBase Database）是一款蚂蚁集团完全自研的企业级原生分布式数据库，在普通硬件上实现金融级高可用，首创“三地五中心”城市级故障自动无损容灾新标准，刷新 TPC-C 标准测试，单集群规模超过 1500 节点，具有云原生、强一致性、高度兼容 Oracle/MySQL 等特性

2023-11-20 17:36:32 1053

原创 OceanBase：Zone管理

OceanBase 集群由若干个 Zone 组成。从物理层面来讲，一个 Zone 通常是一个独立的物理部署单元，可以是一个数据中心（IDC）或者云上的一个 Zone（可用区），也可以是一个单独的机架（Rack）。通过将 OceanBase 集群部署于不同的 Zone ，实现单个 Zone 故障时的故障隔离及快速恢复。

2023-11-19 14:56:18 923

原创 Debezium-Embedded 实时监控MySQL数据变更

Debezium连接器的操作通常是将它们部署到Kafka Connect服务，并配置一个或多个连接器来监控上游数据库，并为它们在上游数据库中看到的所有更改生成数据更改事件。这些数据更改事件被写入Kafka，在那里它们可以被许多不同的应用程序独立使用。Kafka Connect提供了出色的容错性和可扩展性，因为它作为分布式服务运行，并确保所有注册和配置的连接器始终在运行。

2023-11-15 19:09:54 1630 1

这里请求路径中的_cat 表示查看的意思，indices 表示索引，所以整体含义就是查看当前 ES服务器中的所有索引，就好像 MySQL 中的 show tables 的感觉，服务器响应结果如下。在 Postman 中，向ES服务器发DELETE请求：http://192.168.179.121:9200/shopping/_doc/1。在Postman中，向ES服务器发POST请求：http://192.168.179.121:9200/shopping/_update/1。

2023-11-13 23:43:13 1401 2

原创 Doris：读取Doris数据的N种方法

读取Doris数据的N种方法

2023-11-12 20:18:39 4139

原创 Doris：多源数据目录（Multi-Catalog）

多源数据目录（Multi-Catalog）功能，旨在能够更方便对接外部数据目录，以增强Doris的数据湖分析和联邦数据查询能力。

2023-11-11 18:53:02 5820

原创 Kafka的基本使用

Apache Kafka是一个开源分布式事件流平台，也是一种高吞吐量的分布式发布订阅消息系统，被数千家公司用于高性能数据管道、流分析、数据集成和关键任务应用程序。

2023-11-10 14:47:10 4236

原创 Canal的基本使用

canal主要用途是基于 MySQL 数据库增量日志解析，提供增量数据订阅和消费。

2023-11-09 00:01:21 570

原创 Doris：Binlog Load导入数据(2.0之后官方不推荐)

Binlog Load提供了一种使Doris增量同步用户在Mysql数据库的对数据更新操作的CDC(Change Data Capture)功能。

2023-11-08 08:50:32 1562 3

原创 Doris：MySQL数据同步到Doris的N种方式

通过编程方式，利用jdbc读取mysql中的数据，然后可以通过jdbc或者Stream Load方式插入数据到doris中。当mysql与doris服务之间无法通过网络互联时，可以通过将mysql数据导出成csv文件，然后再在doris服务器导入csv文件的方式进行同步数据。将mysql导出的csv文件上传到doris服务器之后，可以通过Stream Load和MySQL Load两种方式导入数据进doris数据库中。修改fe和be配置文件，指定jdbc_drivers_dir目录。开启服务端导入功能。

2023-11-07 14:09:32 8148 2

原创 Doris：StreamLoad导入数据

Stream load 是一个同步的导入方式，用户通过发送 HTTP 协议发送请求将本地文件或数据流导入到 Doris 中。Stream load 主要适用于导入本地文件，或通过程序导入数据流中的数据。

2023-11-03 21:01:01 4629

原创 OceanBase：03-集群部署

2023-11-01 16:40:34 2493

原创 OceanBase：02-单机部署(生产环境)

OceanBase：单机部署(生产环境)

2023-10-31 08:22:19 1798

原创 OceanBase：01-单机部署(开发环境)

OceanBase：单机部署(开发环境)

2023-10-30 13:53:42 1494

原创数据结构(02331)

1.栈是限定在表的一端进行插入和删除运算的线性表。将插入、删除的一端称为栈顶（top)，另一端称为栈底。遵循的原则是后进先出，也称为LIFO表。2.栈的运算（1）InitStack(&S)：置空栈,构造一个空栈S（1）StackEmpty(S)：判栈空，若栈S为空栈，则返回TRUE，否则返回FALSE（1）StackFull(S)：判栈满，若栈S为满栈，则返回TRUE，否则返回FALSE（1）Push(&S，x)：进栈，将元素x插入S栈的栈顶。

2023-10-27 23:32:57 1272

原创 Doris：同步物化视图

物化视图是将预先计算（根据定义好的 SELECT 语句）好的数据集，存储在 Doris 中的一个特殊的表。物化视图的出现主要是为了满足用户，既能对原始明细数据的任意维度分析，也能快速的对固定维度进行分析查询。

2023-10-24 10:03:27 2388

原创操作系统(02326)

■进程是具有一定独立功能的程序在某个数据集合上的一次运行活动，是系统进行资源分配和调度的一个独立单位。■从操作系统看，进程分为系统进程和用户进程。系统进程的优先级高于一般用户的优先级。1.进程与程序的联系和区别（1）进程与程序的联系●程序是构成进程的组成部分之一。●一个进程的运行目标是执行它所对应的程序。●从静态的角度看，进程是由程序、数据和进程控制块（PCB）三部分组成。（2）进程与程序的区别●进程是动态的，程序是静态的。

2023-10-22 16:24:47 524

原创计算机网络原理(04741)

协议是计算机网络通信实体之间在数据交换过程中需要遵循的规则或约定，是计算机网络有序运行的重要保证。任何一个协议都会显式或隐式地定义三个基本的要素：语法、语义和时序，称为协议三要素。1）语法：语法定义实体之间交换信息的格式与结构，或者定义实体之间传输信号的电平等。2）语义：语义定义实体之间交换信息中需要包含哪些控制信息，这些信息的具体含义，以及针对不同含义的控制信息，接收信息端应如何相应。还需要定义彼此采用何种差错编码以及采取何种差错处理机制等。

2023-10-21 17:55:58 581

原创 Spark-02: RDD编程基础

RDD（Resilient Distributed Dataset）叫做弹性分布式数据集，是 Spark 中最基本的数据处理模型。代码中是一个抽象类，它代表一个弹性的、不可变、可分区、里面的元素可并行计算的集合。RDD算子分为转换（Transformation）算子和行动（ Action）算子，程序运行到转换算子时并不会马上执行转算子，只有碰到行动算子才会真正执行转换算子。

2023-10-11 22:04:17 468