Flink DataStream之使用filter实现分流

最新推荐文章于 2023-12-07 16:41:48 发布

QYHuiiQ

最新推荐文章于 2023-12-07 16:41:48 发布

阅读量796

点赞数

分类专栏：大数据之Flink 文章标签： flink 大数据

本文链接：https://blog.csdn.net/QYHuiiQ/article/details/131622555

版权

大数据之Flink 专栏收录该内容

13 篇文章 1 订阅 ¥49.90 ¥99.00

订阅专栏

超级会员免费看

新建类

package test01;

import org.apache.flink.api.common.JobExecutionResult;
import org.apache.flink.configuration.Configuration;
import org.apache.flink.streaming.api.datastream.DataStreamSource;
import org.apache.flink.streaming.api.datastream.SingleOutputStreamOperator;
import org.apache.flink.streaming.api.environment.StreamExecutionEnvironment;

public class SplitStreamByFilter {

    public static void main(String[] args) throws Exception {

        StreamExecutionEnvironment executionEnvironment = StreamExecutionEnvironment.getExecutionEnvironment(new Configuration());
        //设置并行度
        executionEnvironment.setParallelism(1);
        //监听数据端口
        DataStreamSource<String> dataSource = executionEnvironment.socketTextStream("localhost", 9999);
        //使用filter对数据进行分流，这里测试如果是以H开头的分为一个流，以M开头的分为一个流。缺点是每条数据都会执行一下各个filter
        SingleOutputStreamOperator<String> hWord = dataSource.filte

了解本专栏