Flink MapState TTL

Flink MapState的失效时间是针对整个map还是单个key?

做需求用到了flink的mapstate,对Flink MapState的失效时间是针对整个map还是单个key产生了疑问,没找到明确的说明,遂写了个代码验证了一下。

Flink MapState 使用

flink MapState 引入代码。

        StateTtlConfig ttlConfigString = StateTtlConfig.newBuilder(Time.seconds(10)).setUpdateType(StateTtlConfig.UpdateType.OnCreateAndWrite).setStateVisibility(StateTtlConfig.StateVisibility.NeverReturnExpired).build();
        MapStateDescriptor<String, List> descriptorString = new MapStateDescriptor<String, List>("test", String.class,List.class);
        descriptorString.enableTimeToLive(ttlConfigString);
        stateString = getRuntimeContext().getMapState(descriptorString);

设置失效时间10s

MapState 失效时间验证

@Override
    public String map(Tuple2<String, JSONObject> value) throws Exception {
        String uid = value.f0;
        long time = new Date().getTime();
        if (stateString.contains("test")) {
            List list = stateString.get("test");
            list.add("stri--" + uid + "--" + time);
            stateString.put("test", list);
        } else {
            List timeList = new ArrayList<>();
            timeList.add("stri--" + uid + "--" + time);
            stateString.put("test", timeList);
        }
        if (time % 2 == 0) {
            if (stateString.contains("test1")) {
                List list = stateString.get("test1");
                list.add("stri1--" + uid + "--" + time);
                stateString.put("test1", list);
            } else {
                List timeList = new ArrayList<>();
                timeList.add("stri1--" + uid + "--" + time);
                stateString.put("test1", timeList);
            }
        }
        if (CollectionUtils.isNotEmpty(stateString.get("test1")) && stateString.get("test").size() > 4) {
            System.out.println(stateString.get("test"));
            System.out.println(stateString.get("test1"));
        }
        return null;
    }
生成当前时间戳
在test中存入全部数据
在test1中存入时间戳为偶数的数据
结果对比
存在test中存在的偶数数据不存在于test1可证明MapState的失效时间针对于单独的key

测试数据
如图所示:
时间戳为1610180645072的数据存在于test不存在于test1,即MapState的失效时间针对于单独的key。

  • 3
    点赞
  • 6
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值