qq_30848463的博客

原创 基于spark1.5的时间滑动窗口实现

   在Spark Streaming 和spark sql 中滑动窗口在数据分析中占据这非常重要的位置，通过spark streaming和spark sql 在2.0以上版本可以直接调用时间滑动窗口window函数，但是在Spark SQL 1.5以下的版本是没有相关API的   时间滑动窗口使用场景：     IP1 向 IP2 在固定时间内10秒（可调）内发送请求次数超过固定次数20...