KETTLE
主要记录了kettle的学习过程,以及在学习kettle过程中遇到的一些常见的问题的解决方法的总结等等
@夜魅
趁年轻早点活成自己想要的模样
展开
-
KETTLE 在进行数据迁移过程中性能问题的优化
在kettle进行大量测试数据迁移过程中,一开始的数据速度竟然是20多条/s,很慢,3000W的数据的迁移可想而知,以这样的速度进行迁移肯定是不行的。。。网上搜索了下,修改如下链接参数可以提高效率:useServerPrepStmts=false rewriteBatchedStatements=true useCompression=true 在DB连接模块里面选择任一一个数据库右击点击编辑在选择中添加配置:...原创 2020-10-20 16:19:12 · 895 阅读 · 4 评论 -
KETTLE在执行中出现 java.lang.OutOfMemoryError: Java heap space 内存溢出错误
最近在通过KETTLE调试生成报表数据的时候,当抽取大数据量表数据时,发现执行报错,查看KETTLE执行过程的日志记录,主要错误信息如下:java.lang.OutOfMemoryError: Java heap space kettle一、错误信息java.lang.OutOfMemoryError: Java heap space kettle二、处理方法1、在KETTLE安装目录中找到spoon.bat程序,用记事本等程序打开,找到if "%PENTAHO_DI_JAVA_OPTIONS%"=原创 2020-10-20 15:27:30 · 2861 阅读 · 0 评论