第一次发文章
Unexpected error committing the database connection
java.lang.ArrayIndexOutOfBoundsException: 3
最近几天在搞Kettel工具,因为客户是做生物信息分析的,所以对于一些数据来说,对数据库表的要求比较特殊,比如一个表可能要100多个字段,其中有20个左右是CLOB的,而且数据量灰常大,基本一次会上传几十万条数据上去做分析,所以我们采用了临时表的办法,先用Kettel工具将csv文件里的大量数据导入oracle数据库的一张临时表,再去java程序里写逻辑,不再废话,以下是我使用Kettel遇到的几个问题:
①
一直显示 在运行 ,可能不是因为数据量大,因为error里也一直在输出,所以是有问题的
②
接下来换了一个只有500条数据的CSV,还是报错,error已经执行完,但是没有输出任何东西
③
下面又换了一个只有100条数据的CSV,并且修改Spoon的内存配置(就是Spoon.bat,安装Kettel后根目录data-integration下的启动文件,详细配置可以再百度一下,很简单),依旧插入不了
java.lang.ArrayIndexOutOfBoundsException: 3,数组下标越界,虽然看得懂,但是找不到原因
前前后后,减少条数,重新修改数据库字段,修改Kettel批量提交数量,修改数据,都没得用,
第二天无意百度到一个答案,说是最初配置的jar包一定要和你操作的数据库jar包版本一致,于是找到oracle目录下的jar包
ojdbc14-10.2.0.2.jar(我配置在kettel目录下的,data-integration\libswt)
ojdbc14-10.2.0.4.jar(oracle目录里面的)
果断替换,重启Kettel,测试成功!
5万条数据,19s
替换jar包是要把jar包放到你的系统相应文件夹下