高级DBA教你clickhouse数据导入MYSQL数据库技术方法

技术很渣

已于 2024-03-13 14:23:32 修改

阅读量2.9k

点赞数 3

分类专栏： DBA运维高级晋级 clickhouse实战应用文章标签：数据库 mysql clickhouse

于 2022-09-09 11:55:23 首次发布

本文链接：https://blog.csdn.net/nasen512/article/details/126780035

版权

DBA运维高级晋级同时被 2 个专栏收录

35 篇文章 4 订阅

订阅专栏

clickhouse实战应用

18 篇文章 3 订阅

订阅专栏

本文详细介绍了如何从ClickHouse数据库导入数据到MySQL，包括创建ClickHouse表、制作测试数据、同步表结构、建立MySQL物化表、插入数据及验证迁移过程。作者作为数据库专家，分享了关键步骤和技术细节。

摘要由CSDN通过智能技术生成

clickhouse数据库表数据导入MYSQL数据库技术方法

步骤1：clickhouse建立一个表，MYSQL并没有这个表

CREATE TABLE nasen_test
(

    `id` Int32,

    `remark` Nullable(String)
)
ENGINE = MergeTree
ORDER BY id
SETTINGS index_granularity = 8192;

步骤2：clickhouse端制造一些测试数据

insert into nasen_test(id,remark) values(2,'测试2');
insert into nasen_test(id,remark) values(3,'测试3');
insert into nasen_test(id,remark) values(4,'测试4');

步骤3:MYSQL数据库建表字段跟CK表字段一样，表名称不一样。

create table nasen_test_mysql(
 id int,
 remark varchar(8000)
);

步骤4：在clickhouse利用MYSQL引擎建立MYSQL的物化表字段也是一致。

在clickhouse端建立一个与MYSQL数据库物化表

create table nasen_test_mysql(
 id Nullable(Int32),
 remark Nullable(String)
)engine=MySQL('192.168.1.1:3306','数据库名称','nasen_test_mysql','数据库用户名','数据库密码');

此处注意2个数据库字段映射关系
在这里插入图片描述
测试一下，查看物化是否建立好，查询数据没有报错，则代表通道建立成功！

步骤5：在clickhouse将nasen_test数据插入nasen_test_mysql表

insert into nasen_test_mysql select * from nasen_test

在这里插入图片描述

步骤6：去MYSQL查询nasen_test_mysql这个表是否存在clickhouse的数据

在这里插入图片描述
数据已经从clickhouse端导入到mysql数据库

笔者简介
国内某一线知名软件公司企业认证在职员工：任JAVA高级研发工程师,大数据领域专家,数据库领域专家兼任高级DBA!10年软件开发经验！现任国内某大型软件公司大数据研发工程师、MySQL数据库DBA，软件架构师。直接参与设计国家级亿级别大数据项目!并维护真实企业级生产数据库300余个!紧急处理数据库生产事故上百起，挽回数据丢失所造成的灾难损失不计其数!并为某国家级大数据系统的技术方案（国家知识产权局颁布）专利权的第一专利发明人！

在这里插入图片描述