Flink学习笔记4-Flink框架api介绍

1. aggregations
aggregations通过keyedStream进行一些聚合操作,例如sum(),min(),max()等。示例如下:

KeyedStream.sum(0)或者KeyedStream.sum(“Key”)

2. connect
connect和union类似,但是只能连接两个流,两个流的数据类型可以不同,会对两个流中的数据应用不同的处理方法。示例如下:

DataStreamSource<Long> src1 = env.addSource(new MyParalleSource())
DataStreamSource<Long> src2 = env.addSource(new MyParalleSource())
SingleOutputStreamOperator<String> src2_str = text2.map(() ->(return "str" + value));
ConnectedStreams<Long, String> connectStream = text1.connect(text2_str);

3. split
根据一定的规则将一个数据流切分成多个数据流。
4. Window/WindowAll
window按时间进行聚合或者其他条件对KeyedStream进行分组

inputStream.keyBy(0).window(Time.seconds(10))

windowAll 函数允许对常规数据流进行分组。通常,这是非并行数据转换,因为它在非分区数据流上运行。

inputStream.keyBy(0).windowAll(Time.seconds(10))
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值