Transwarp组件Trasporter工具数据抽取

1、当将inceptor的IDAP安全认证开启之后,transporter组件不能启动,参看日志文件/var/log/transporter1/发现是无法连接数据库,用户名密码错?不是,是没有开配置项里的IDAP模式,将tdt-site.xml配置里的

<property>
  <name>tdt.inceptor.auth.mode</name>
  <value>NONE</value>
</property>
复制代码

改成IDAP,需要底层改,不能直接在界面上更改 改完之后还是不能成功,需要开启inceptor和transporter的kerberos认证

开启认证又遇到了问题,transwarp不能开单组件的安全认证,最后我们只能一键全开kerberos认证

2、用jdbcreader连接oracle数据库,jdbc bunch接收

报错 Task MAPRED-SPARK error SparkException: [Error 1] Job aborted due to stage failure: Task 0 in stage 17.0 failed 4 times, most recent failure: Lost task 0.3 in stage 17.0 (TID 16, 10.10.12.210): java.lang.RuntimeException: Exception found during closeOp. See more detail on executor log. SQLState: 08S01

已知的版本问题:数据类型decimal不能为空,为空就报错,将目标表的数据格式改成了double,测试成功

转载于:https://juejin.im/post/5c3c392e51882524b77b6c55

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值