kettle API调用Clickhouse插件

20 篇文章 2 订阅
6 篇文章 0 订阅

kettle API调用Clickhouse插件

背景

kettle目前版本没有clickhouse驱动,需要自定义插件。使用Kettle工具连接Clikchouse正常连接,但是使用Java调用Kettle时,报【database type with plugin id [Clickhouse] couldn’t be found!】这样的报错。
在这里插入图片描述

解决

需要在执行ktr的时候,设置变量。
在这里插入图片描述

      String KETTLE_PLUGIN_BASE_FOLDER = sourceFile.getPath().concat(File.separator)
                .concat("plugins");
        System.setProperty("KETTLE_PLUGIN_BASE_FOLDERS", KETTLE_PLUGIN_BASE_FOLDER);

参考博客

kettle api 方式加载plugins 里面的插件

  • 1
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 4
    评论
kettle7.1是一款用于数据集成和转换的开源工具,而ClickHouse是一种高性能、列式存储的数据库管理系统。在Kettle7.1中,我们可以通过以下步骤实现与ClickHouse的连接。 首先,我们需要下载并安装Kettle7.1。然后,在Kettle中打开一个新的转换(Transformation)或作业(Job)。 接下来,我们需要添加一个“输入”步骤,用于读取需要导入到ClickHouse中的数据。可以根据数据源的类型选择不同的输入步骤,如“文本文件输入”或“数据库连接”等。根据实际情况配置输入步骤所需的参数,如文件路径、数据库连接信息等。 然后,我们添加一个“输出”步骤,用于将数据导入到ClickHouse中。选择适合的输出步骤,如“ClickHouse插入/更新”或“ClickHouse输出”,并配置连接ClickHouse所需的参数,如数据库地址、端口号、用户名、密码等。 在配置完成后,我们需要设置输入步骤与输出步骤之间的映射关系。可以通过拖拽字段、定义输入输出字段的映射规则来完成字段的映射。确保输入步骤和输出步骤的字段对应正确,这样才能正确地将数据导入到ClickHouse中。 最后,我们可以保存并执行这个转换(或作业),将数据从源端读取并导入到ClickHouse中。在执行过程中可以查看日志,确保数据导入的过程顺利进行。 通过以上步骤,我们可以实现Kettle7.1与ClickHouse的连接,方便地进行数据集成和转换操作。点击Pentaho Documentation链接获取更详细的操作步骤和示例代码。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 4
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

Abner G

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值