flink窗口函数和group by,join,coGroup算子都需要指定key进行转换。下面的介绍一些key几种方式
1.根据字段位置。主要对tuple类型,pojo类会出错。注意:这个是相对于最外元素而言,同时不能指定嵌套里面的位置
指定嵌套里面的字段为key,从结果看出是按照嵌套的第二字段分区的但是以第一个进入为第一个字段了。
2.根据字段名称,主要是pojo类。但是对sum这种聚合函数都可以指定字段位置和名称,如果是位置则是从0开始。
多个字段分区
3.自定义keyselector
总结:上面的3种key分区,只是分区到同一窗口,不会改变key的值
flink的分区key指定方法
最新推荐文章于 2024-05-03 04:20:13 发布