FLINK
文章平均质量分 82
香帅_Daniel Wu
Daniel Wu
展开
-
Flink实时计算topN热榜
topN的常见应用场景,最热商品购买量,最高人气作者的阅读量等等。 1. 用到的知识点 1.Flink创建kafka数据源; 2.基于 EventTime 处理,如何指定 Watermark; 3.Flink中的Window,滚动(tumbling)窗口与滑动(sliding)窗口; 4.State状态的使用; 5.ProcessFunction 实现 TopN 功能; 2. 案例介绍 通过用户访问日志,计算最近一段时间平台最活跃的几位用户topN。 1.创建kafka生产者,发送测试数据到kafka; 2原创 2021-11-30 00:04:12 · 2000 阅读 · 2 评论 -
flink 提交程序
flink提交程序有两种方式: 1、Standalone HA 2、Flink on yarn 首先结合例子先介绍第一种方法: #Standalone HA package cn.wc import org.apache.flink.api.java.utils.ParameterTool import org.apache.flink.streaming.api.scala._ object StreamWordCount01 { def main(args: Array[String]): Un原创 2021-08-28 22:12:09 · 378 阅读 · 0 评论