Flink读取state的状态

最新推荐文章于 2024-09-12 12:14:07 发布

「已注销」

最新推荐文章于 2024-09-12 12:14:07 发布

阅读量2.7k

点赞数

分类专栏： flink 文章标签： flink state查询 queryable state

本文链接：https://blog.csdn.net/whr_yy/article/details/100535945

版权

本文介绍了如何在Flink中设置和查询State。首先，需要将flink-queryable-state-runtime_2.11-1.9.0.jar添加到lib目录，然后更新flink-conf.yaml配置。接着，提交作业并获取TaskManager的查询地址。最后，通过添加依赖和编写客户端代码进行状态查询。

摘要由CSDN通过智能技术生成

1、复制flink opt目录下的flink-queryable-state-runtime_2.11-1.9.0.jar包到lib目录

2、修改配conf/flink-conf.yaml配置文件

添加如下配置

# queryable-state
queryable-state.enable: true

3、提交如下代码示例

public class WordCount {
    public static void main(String[] args) throws Exception {
        StreamExecutionEnvironment env = StreamExecutionEnvironment.getExecutionEnvironment();

        env.enableCheckpointing(5000);
        env.setStateBackend(new RocksDBStateBackend("hdfs://nameservice1/user/hdfs/flink/checkpoints"));

        env
                .socketTextStream("192.168.0.1", 9999)
                .flatMap(new FlatMapFunction<String, Tuple2<Long, Long>>() {
                    @Override
                    public void flatMap(String s, Collector<Tuple2<Long, Long>> collector) throws Exception {
                        collector.collec