Flink
最初的节奏
人在壮大过程中的每一个阶段,都需要求得当时比自己的认识更高明的指教
展开
-
Flink消费Kafka
Flink消费Kafka 点关注不迷路,欢迎再访! 一.Flink Source&Sink在 Flink 中,Source 代表从外部获取数据源,Transformation 代表了对数据进行转换操作,Sink 代表将内部数据写到外部数源。一个 Flink Job 一般由 Source, Transformation, Sink 组成。二.引入kafka依赖 <...原创 2019-08-20 21:38:59 · 4125 阅读 · 2 评论 -
Flink数据写入Redis
Flink数据写入Redis 点关注不迷路,欢迎再访! 框架springboot ,redis 集群配置通过propertie文件形式,@Value获取配置参数。Source :fakfaSink :redis作业内容:通过kafka 主题获取数据,将统计同一个身份证每天报价的次数,将统计结果实时写入redis。思路:以身份证唯一性,通过keyBy(0) 身份证号分区可以实现统...原创 2019-08-22 21:30:42 · 3998 阅读 · 0 评论 -
akka.pattern.AskTimeoutException: Ask timed out on
Flink配置 点关注不迷路,欢迎再访! 官方配置参考:https://flink.sojb.cn/ops/config.htmljob运行异常:Caused by: akka.pattern.AskTimeoutException: Ask timed out on [Actor[akka://flink/user/dispatcher15e85f5d-a55d-4773-8...原创 2019-08-28 22:22:01 · 6986 阅读 · 7 评论 -
Flink Windows窗口计算
Flink Windows窗口计算 点关注不迷路,欢迎再访! 滚动窗口完整案例/** * @author ex_sunqi * */@Componentpublic class KafkaFlinkJob implements ApplicationRunner { private final static Logger logger = LoggerFactor...原创 2019-09-06 22:41:11 · 759 阅读 · 0 评论