FLINK
文章平均质量分 82
香帅_Daniel
Daniel Wu
展开
-
Flink实时计算topN热榜
topN的常见应用场景,最热商品购买量,最高人气作者的阅读量等等。1. 用到的知识点1.Flink创建kafka数据源;2.基于 EventTime 处理,如何指定 Watermark;3.Flink中的Window,滚动(tumbling)窗口与滑动(sliding)窗口;4.State状态的使用;5.ProcessFunction 实现 TopN 功能;2. 案例介绍通过用户访问日志,计算最近一段时间平台最活跃的几位用户topN。1.创建kafka生产者,发送测试数据到kafka;2原创 2021-11-30 00:04:12 · 1978 阅读 · 2 评论 -
flink 提交程序
flink提交程序有两种方式:1、Standalone HA2、Flink on yarn首先结合例子先介绍第一种方法:#Standalone HApackage cn.wcimport org.apache.flink.api.java.utils.ParameterToolimport org.apache.flink.streaming.api.scala._object StreamWordCount01 { def main(args: Array[String]): Un原创 2021-08-28 22:12:09 · 361 阅读 · 0 评论