基于flink无增量CountWindow算子的使用

上篇:简单谈谈flink窗口的分类有哪些?

无增量操作,代码实现

package cn._51doit.flink.day04;

import org.apache.flink.configuration.Configuration;
import org.apache.flink.streaming.api.datastream.AllWindowedStream;
import org.apache.flink.streaming.api.datastream.DataStreamSource;
import org.apache.flink.streaming.api.datastream.SingleOutputStreamOperator;
import org.apache.flink.streaming.api.environment.StreamExecutionEnvironment;
import org.apache.flink.streaming.api.windowing.windows.GlobalWindow;
/**
 * CountWindow的使用【无界流】
 * 不分组划分窗口,按照数据的条数划分窗口,CountWindow属于Global windows的一种
 *
 * 需求:一次必须输入5条数据它才会进行运行,否则不输出打印
 */
public class CountWindowAllDemo {
    public static void main(String[] args) throws Exception {
        StreamExecutionEnvironment env = StreamExecutionEnvironment.createLocalEnvironmentWithWebUI(new Configuration());

        //1
        //2
        //3
        DataStreamSource<String> lines = env.socketTextStream("Master", 8888);

        //将字符串转为数字【lamber表达式】
        //本地执行,执行并行度为4,所以调用map返回的DataStream的并行度为4
        SingleOutputStreamOperator<Integer> nums = lines.map(Integer::parseInt);

        //划分window
        //GlobalWindow有几个并行度?并行度:1,只有一个分区(在这个窗口内只有一个subTask)
        AllWindowedStream<Integer, GlobalWindow> windowed = nums.countWindowAll(5);

        //把窗口数据进行聚合
        SingleOutputStreamOperator<Integer> sum = windowed.sum(0);

        sum.print();

        env.execute();

    }
}

控制台打印输出:

查看job:http://localhost:8081/#/job/942acf420d84c36c4ddfe8a7edc81ce9/overview

谢谢,分享完毕!

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值