【Flink实战系列】Flink 实时计算热门商品 TopN

1,需求

每隔5分钟输出最近一小时内点击量最多的前N个商品 这是一个很常见的需求,其实跟实时的pv,uv差不多,可能会比pv,uv复杂一点,由于Flink窗口功能的强大,也让这个需求变的相对简单了,当然用Flink SQL也可以实现.

2,实现步骤

1. 抽取出业务时间戳，告诉Flink框架基于事件时间做滑动窗口
2. 过滤出点击行为数据
3. 按一小时的窗口大小，每5分钟统计一次，做滑动窗口聚合（Sliding Window）
4. 按每个窗口聚合，输出每个窗口中点击量前N名的商品
5. 结果存储到mysql中.

3,代码实现

package flink

import java.{lang, sql}
import java.sql.DriverManager
import flink.util.CommonUtils
import org.apache.flink.api.common.functions.AggregateFunction
import org.apache.flink.api.common.restartstrategy.RestartStrategies
import org.apache.flink.api.common.state.{ListState, ListStateDescriptor}
import org.apache.flink.ap