Flink测流输出

最新推荐文章于 2025-06-02 09:17:11 发布

JinVijay

最新推荐文章于 2025-06-02 09:17:11 发布

阅读量1.7k

点赞数 1

CC 4.0 BY-SA版权

分类专栏： flink 文章标签： flink 蓝桥杯 linq

本文链接：https://blog.csdn.net/JinVijay/article/details/123104780

这篇博客介绍了Apache Flink中如何使用侧流（Side Output）进行数据标记和处理，以及如何处理窗口中的迟到数据。通过示例代码展示了在数据流处理过程中，如何根据条件将数据分流到不同的侧流，并且演示了针对EventTime窗口中迟到数据的获取和输出。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

测流输出示例

/**
 * 测流输出
 * 本质上,就是将一个流中的数据打上标签,未打标签的数据叫主流,
 * 打标签的数据流,叫侧流(非主流)
 *
 * 在Flink中,DataStream中的数据流,按照是否打标签,分为两类
 * 1.侧流,就是打上标签的数据流,想要获取,就必须根据标签才能获取到
 * 2.主流,就是未打标签的数据,直接操作DataStream就可以了
 */
public class SideOutputDemo {

    public static void main(String[] args) throws Exception {

        StreamExecutionEnvironment env = StreamExecutionEnvironment.getExecutionEnvironment();

        DataStreamSource<String> lines = env.socketTextStream("linux01", 7777);
        //需指定泛型的类型  或者new OutputTag的子类(即使用匿名内部类)
        //OutputTag<Integer> oddTag = new OutputTag<Integer>("odd-data") {};
        OutputTag<Integer> oddTag = new OutputTag<>("odd-data", Types.INT);
        OutputTag<Integer> evenTag = new OutputTag<>("even-data",Types.INT);
        OutputTag<String> strTag = new OutputTag<>("str-data",Types.STRING);

        SingleOutputStreamOperator<String> mainStream = lines.process(new ProcessFunction<Strin