flink
帅气迷人的老害虫
一天玩flink
展开
-
flink sql lookup join学习demo
flink sql lookup join小案例学习原创 2022-11-10 15:43:22 · 745 阅读 · 1 评论 -
Flink CDC写入数据到kafka几种格式
flink cdc写入kafka数据常见的几种格式原创 2022-11-10 15:01:35 · 3041 阅读 · 0 评论 -
Flink中实现自定义反序列化消费Kafka中的二进制数据
1.简介kafka中的数据通常以二进制或者字符串存储,本文是针对kafka中的二进制数据,自定义反序列化类,利用flink读取消费,将二进制数据反序列成指定的实体类对象。2.代码实现2.1编写自定义反序列化类继承AbstractDeserializationSchema,重写deserializer方法package com.bigdata.deserializer;import com.bigdata.bean.User;import org.apache.flink.api.common.原创 2021-01-13 14:18:19 · 1777 阅读 · 0 评论 -
Flink CEP编程入门二
一、简介本篇是flink CEP编程入门的第二篇,进一步用案例说明CEP编程中处理复杂事件流相关的知识。业务场景:业务订单在创建的一段时间内,未完成支付,则判断当前订单为超时失效的状态。二、代码示例package com.bigdata.flinkimport org.apache.flink.cep.scala.CEPimport org.apache.flink.cep.scala.pattern.Patternimport org.apache.flink.streaming.api.原创 2020-12-29 11:28:02 · 167 阅读 · 0 评论 -
Flink CEP编程入门一
一、简介flink中的CEP(Complex Event Processing)是处理复杂事件流的库,可以自动在流式数据处理中对相关事件进行处理和检索。比如用一个用户在1min内连续登录的失败次数超过2次,则将该用户的登录的行为判断为恶意登录的行为。本篇是CEP编程入门的第一篇二、Maven依赖 <properties> <scala.binary.version>2.11</scala.binary.version> <原创 2020-12-29 10:59:23 · 347 阅读 · 0 评论