Flink
追枫萨
更厉害的大人和更可爱的小孩...
展开
-
解决:UserBehavior is already defined as case class UserBehavior
问题运行Flink scala程序时,提示如下错误,但仔细检查UserBehavior样例类的确仅定义了一次。解决右击重新编译代码,再运行。至于原因还不清楚。...原创 2020-02-18 15:40:21 · 1462 阅读 · 0 评论 -
解决:no implicits found for parameter evidence$8:Typeinformation[ApacheLogEvent]
问题scala编写Flink程序,transform转换数据时提示信息:no implicits found for parameter evidence$8:Typeinformation[ApacheLogEvent]解决添加如下:import org.apache.flink.api.scala._...原创 2020-02-17 13:50:24 · 1518 阅读 · 0 评论 -
Flink实战:用户行为分析之热门商品TopN统计
环境ubuntu14、flink1.7.2、scala2.11、kafka2.3.0、jdk1.8、idea2019步骤抽取出业务时间戳,告诉 Flink 框架基于业务时间做窗口 过滤出点击行为(pv)数目 按一小时的窗口大小,每 5 分钟统计一次,做滑动窗口聚合(Sliding Window) 按每个窗口聚合,输出每个窗口中点击量前 N 名的商品实现创建maven项目,命...原创 2020-02-16 23:54:52 · 1174 阅读 · 1 评论 -
解决:java.lang.ClassNotFoundException: org.apache.flink.api.common.serialization.DeserializationSchema
问题运行Flink1.7消费kafka主题消息示例程序时,需要将消息的key-value使用string反序列化,提示Error如下:Error: A JNI error has occurred, please check your installation and try againException in thread "main" java.lang.NoClassDefFou...转载 2020-01-19 17:48:58 · 19474 阅读 · 3 评论 -
Flink1.7:Linux安装及IDEA运行WordCount累积计数
环境ubuntu16、jdk1.8、scala2.11、hadoop2.7、ideaIU-2019.2.3、maven3.2.5安装下载flink-1.7.2-bin-hadoop27-scala_2.11.tgz到~/.Downloads/下(~代表本用户目录)解压:tar zxvf flink-1.7.2-bin-hadoop27-scala_2.11.tgz -C /u...转载 2020-01-16 10:38:10 · 570 阅读 · 0 评论 -
Flink学习资源
Flink China 中文视频教程Flink1.9官方文档zhisheng、zhisheng17(github代码)Apache Flink官方样例代码Apache Flink 中文官网及案例Jark's Blog心泽Flink初探-为什么选择基于Flink实现的商品实时推荐系统...原创 2019-09-24 15:40:23 · 260 阅读 · 0 评论