flink版本变化工作|学习测试总结

1、flink1.10对TM内存模型做了较大改动
2、从 Flink1.10 开始,Flink 默认将 RocksDB 的内存大小配置为每个 task slot 的托管内存。
3、Flink1.11开始提供了一个内置的 DataGen 连接器
4、1.12 之前的版本有 bug,开启 miniBatch,不会清理过期状态,也就是说如果设置状态的 TTL,无法清理过期状态。1.12版本才修复这个问题,并且目前,key-value 配置项仅被 Blink planner 支持。
5、Flink1.13可以通过作业图的算子UI展示的颜色来看是否存在反压问题
6、flink1.13增加了火焰图,通过命令-Drest.flamegraph.enabled=true打开火焰图功能
7、Flink1.13直接在 WebUI 提供 JVM 的 CPU 火焰图
8、Flink1.13之前可以手动做火焰图
9、Flink1.13增加引入了 State 状态访问的性能监控
10、Flink1.13对SQL模块的Window TVF进行了一系列的性能优化,可以自动对滑动窗口进行切片解决细粒度滑动问题。
11、Flink1.13中对 RocksDB 增加了分区索引功能

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值