kettle抽数到mysql报错

今天项目测试,中间库使用工具kettle,但是在往mysql库推数据的时候报了两个错误:

错误一:Incorrect string value: '\xF0\x9F\x91\x80' for column 

            -- 问题一解决方法:添加参数解决。

错误二:Unable to get database metadata from this database connection

            -- 问题二解决方法:1、清空缓存;2、检查数据连接及字段映射是否正确。

根据报错应该是数据类型的错误,记得之前使用kettle的时候,添加过连接数据源的选项,经过多次编码测试终于成功,直接贴出正确的,遇到类似的问题可以一试:

1、打开DB连接,看到左边的:高级和选项

2、点击高级,在右下框中输入 : set names utf8mb4;

    【网上很多说改成:set names utf8; 但我的不行,改成utf8mb4才可以,可能是因为数据格式的问题,自己对比差异

3、点击选项,输入三行(命名参数填左边的,值填右边的)

 defaultFetchSize     500
useCursorFetch       true
characterEncoding   utf8

提升读取插入数据的速度:

如果上面三个参数无法提速,可以在选项页添加下面三个参数:

useServerPrepStmts=false
rewriteBatchedStatements=true
useCompression=true

(具体情况可能还要根据自己使用的库的编码而定,这里只是提供一下参考,如果不能解决,可以根据自己的数据库编码多尝试不同的编码)

最后保存,清空缓存,最好重启一下,我清空缓存还是报了错误,复制了那张表就成功了。然后清空缓存,重启一下,原来报错的表也没问题了。

小问题也花了好长时间,不知这样对不对,问题解决了,先记录一下。

----以上----

寻找 管什么日月星辰;

跋涉 分什么春夏秋冬;

  • 4
    点赞
  • 10
    收藏
    觉得还不错? 一键收藏
  • 8
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 8
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值