seatunnel从数据库抽取数据时报错:Get column index of query result exception

从influxDB往外抽数时经常报这个错误,已解决,在此总结下原因

抽数时出现 Get column index of query result exception

①需要注意sql中有无关键字 ,如果有,则需要加上\“XXX\”(以influxDB为例,我这边有tag字段,和关键字冲突了,在脚本中要改成\“tag\”)。

②脚本中写sql 时 脚本中不能使用SELECT * ,要使用SELECT 字段名

③查阅seatunnel influxDB 的connector源码后发现,抽取数据时判断数据类型的依据是 :根据脚本中所填写sql执行limit 1来判断数据类型,因此如果sql查不到数据,seatunnel就无法判断数据类型,所以用seatunnel进行抽数时,必须保证数据库要抽的表是有数的

④seatunnel大小写敏感,transform里面的sql中的字段,不光要与source里的一致,也要保证大小写一致

补充:要注意海豚调度与数据源的时间设置的一致,比如,如果使用influxDB,需要注意influxDB里时间都是UTC标准的,因此海豚调度任务选择时区时要选择UTC标准,避免时间对不上导致无数据

时区问题要注意:
1.海豚调度的日期参数注入是否受时区的影响
2.数据源是否已经设置时区
3.数据源的客户端连接工具是否处理了时区
4.数据源是否会一直有实时数据
5.写入到目标数据源是否受时区影响,是否需要额外加工时区数据

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 1
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值