flink
阿烦大64
这个作者很懒,什么都没留下…
展开
-
【大数据面经系列】大数据开发(实时计算方向)面试题(二)
腾讯一面自我介绍特征变量计算项目两个字符串相减(大数相减)flink端到端一致性flink两阶段提交以及如何与checkpoint机制结合flink反压机制两数相加米哈游一面自我介绍flink作业提交过程算子如何分配slotflink watermark业务场景:去重求当天的pv业务场景:实时数仓架构设计java:currentHashmap 原理 volitatefinal,finally,finalize关键字区别类加载以及在jvm中flink中有哪些关联维原创 2022-02-16 21:29:36 · 1909 阅读 · 0 评论 -
【大数据面经系列】大数据开发(实时计算方向)面试题(一)
得物一面自我介绍实时数仓相关项目介绍flink集群规模与版本多流join有哪些?connect原理与实现flink状态后端有哪些?FSMemory和RocksDBstate有什么区别?flink反压机制如何检测和解决?多个算子的单一算子链如何检测反压?kafka ack机制 kafka rebalance二面自我介绍实时模型特征值工程介绍?重点项目介绍频繁查询维表如何处理?频繁update 外存如何处理?端到端的一致性保证sink到kafka中的一致性保证?kafk原创 2022-01-29 12:14:59 · 3883 阅读 · 0 评论 -
flink MapState 更新存储对象问题
这里写自定义目录标题欢迎使用Markdown编辑器欢迎使用Markdown编辑器在使用flink中的状态管理器时,由于需求背景我选用了MapState存储结构,但是在使用过程中发现修改存储对象的时候并没有MapState中的值并没有自动更新,这让我产生了很大的疑惑,看官方文档和flink源码中我都一直把MapState认为是类似于Map结构的,那自然认为修改里面的存储对象时整个map会自动更新,但是实际使用和测试下来确发现不是这样。先贴一段官方文档:MapState<UK, UV>:原创 2020-10-20 19:45:48 · 2265 阅读 · 2 评论
分享