使用Kettel导入Oracle数据库遇到的一些问题

第一次发文章

Unexpected error committing the database connection

 java.lang.ArrayIndexOutOfBoundsException: 3

最近几天在搞Kettel工具,因为客户是做生物信息分析的,所以对于一些数据来说,对数据库表的要求比较特殊,比如一个表可能要100多个字段,其中有20个左右是CLOB的,而且数据量灰常大,基本一次会上传几十万条数据上去做分析,所以我们采用了临时表的办法,先用Kettel工具将csv文件里的大量数据导入oracle数据库的一张临时表,再去java程序里写逻辑,不再废话,以下是我使用Kettel遇到的几个问题:

一直显示 在运行 ,可能不是因为数据量大,因为error里也一直在输出,所以是有问题的


接下来换了一个只有500条数据的CSV,还是报错,error已经执行完,但是没有输出任何东西

下面又换了一个只有100条数据的CSV,并且修改Spoon的内存配置(就是Spoon.bat,安装Kettel后根目录data-integration下的启动文件,详细配置可以再百度一下,很简单),依旧插入不了

 java.lang.ArrayIndexOutOfBoundsException: 3,数组下标越界,虽然看得懂,但是找不到原因


前前后后,减少条数,重新修改数据库字段,修改Kettel批量提交数量,修改数据,都没得用,

第二天无意百度到一个答案,说是最初配置的jar包一定要和你操作的数据库jar包版本一致,于是找到oracle目录下的jar包

ojdbc14-10.2.0.2.jar(我配置在kettel目录下的,data-integration\libswt)

ojdbc14-10.2.0.4.jar(oracle目录里面的)

果断替换,重启Kettel,测试成功!


5万条数据,19s

替换jar包是要把jar包放到你的系统相应文件夹下

  • 2
    点赞
  • 5
    收藏
    觉得还不错? 一键收藏
  • 1
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值