Flink Table转DataStream后存在时差问题

代码:
Table table = tenv.sqlQuery(“select row_time,host_name from xx where host_name = ‘xx’”)
DataStream datastream = table.toAppendStramRow

执行过程:

  1. processOperator
    实际就是select操作, 这一步用到了SqlFunctions.toLong方法将timestamp字段转为long, 时间加8小时

  2. periodicWatermarksOperator
    将上一步的结果作为watermark传下去(+8小时后的结果)

  3. where
    实际就是where操作

4.outputRowTimeOperator(toAppendStram操作触发的)
将CROW 转为Row , 这一步会之前+8小时的rowtime字段 -8h

  1. 打印结果
    这里获取的row结果和读进来的一致, 但是下游收到的watermark是+8小时的

  2. 如果后续对datastream进行时间窗口操作,应该会发生数据在+8小时的窗口里

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值