同步mysql或者oracle的表结构和数据到clickhouse

把mysql的表全量一次性同步到ck

create table table_name engine = MergeTree ORDER BY primarykey_name as select c1,c2,c3....... from mysql('hostname:3306','db_name','table_name','username','password_of_mysql') ;

其实关键就是后面的select开始的这部分,这段sql如果能在ck里面执行成功,那就没有什么问题了。

尝试同步oracle的心路历程(最终未成功,过程仅供参考)

首先看官网,https://clickhouse.tech/docs/en/sql-reference/statements/create/table/,看到Creates a table with the structure and data returned by a table function. 点table function. 进入到相关页面,没有指明oracle到底用哪种

尝试使用jdbc的方式去连,进入到jdbc的详细页面,https://clickhouse.tech/docs/en/sql-reference/table-functions/jdbc/,发现有句话:This table function requires separate clickhouse-jdbc-bridge program to be running. 明确指出需要独立的clickhouse-jdbc-bridge 程序运行,然后百度了一下,发现这篇文章写的比较清楚https://blog.csdn.net/weixin_43704599/article/details/108624852 clickhouse-jdbc-bridge如何使用 ,按文章所说,先进入github地址: https://github.com/ClickHouse/clickhouse-jdbc-bridge,看到

Bridge was tested against following JDBC drivers:

  1. H2 (in-memory)
  2. SQLite
  3. MySQL
  4. PostgreSQL

没有表明支持oracle,但是还是不甘心,把clickhouse-jdbc-bridge 工程打包成jar,丢到ck的服务器,把oracle和mysql的jdbc驱动jar包丢到clickhouse-jdbc-bridge的jar相同的目录,执行

java -jar clickhouse-jdbc-bridge-1.0.1.jar --driver-path ./ --listen-host 0.0.0.0 &

然后按

 

SELECT * FROM jdbc('jdbc:mysql://localhost:3306/?user=root&password=root', 'schema', 'table') 去查询mysql数据,查询成功了。

然后改成oracle,执行

select *from jdbc('jdbc:oracle:thin:@ip:1521:sid?user=用户名&password=密码','库名','表名');

执行报错:ORA-12505, TNS:listener does not currently know of SID given in connect desc .

最终结果:尝试在ck中连接oracle失败,有大神知道问题在哪请留言告知,不甚感谢!

  • 0
    点赞
  • 4
    收藏
    觉得还不错? 一键收藏
  • 10
    评论
评论 10
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值