Flink
文章平均质量分 89
Flink开发相关内容
蒋含竹
非淡泊无以明志,非宁静无以致远。
展开
-
ChunJun源码分析——脏数据插件
【代码】ChunJun脏数据插件——源码分析。原创 2023-03-06 15:53:13 · 527 阅读 · 0 评论 -
ChunJun源码分析——JDBC轮询增量更新
ChunJun-JDBC轮询增量更新-源码分析,断点续传与增量更新字段的关系原创 2023-02-10 13:52:31 · 942 阅读 · 0 评论 -
ChunJun源码分析——任务提交
源码,ChunJun/FlinkX任务提交启动的流程源码分析,提交参数解析、反射Main、SYNC、SQL、connector插件加载、Source、Sink原创 2023-02-06 09:42:30 · 766 阅读 · 1 评论 -
Flink示例——Flink-CDC
Flink示例——Flink-CDC版本信息Mavan依赖主从同步配置、数据准备使用Flink-CDC简单的测试Flink示例——Flink-CDC版本信息产品 版本Flink 1.11.1flink-cdc-connectors 1.1.0Java 1.8.0_231MySQL 5.7.16注意:官方说目前支持MySQL-5.7和8,但笔者还简单测试过mariadb-10.0.38(对应MySQL-5.6)。包括增加、删除、更新、聚合,目前皆可用,但不排除未知问题。Mavan原创 2020-09-18 23:28:39 · 12356 阅读 · 17 评论 -
Flink应用——公交疫情实时流监控
文章目录Flink应用——公交疫情实时流监控前言版本信息Mavan 依赖数据源(刷卡事件信息 + 公交车信息)流数据源Bean对象与数据获取公交车辆最新的状态信息(开窗函数)刷卡事件信息关联车辆状态信息(Join)后续,下游操作Flink应用——公交疫情实时流监控前言此部分是Flink的场景应用示例,本篇主要结合近期的疫情热点做应用需要注意的是,后续的代码主要以版本信息产品版本Flink1.9.1Java1.8.0_231Scala2.11.12M原创 2020-07-27 14:31:39 · 902 阅读 · 4 评论 -
Flink示例——Table、SQL
文章目录Flink示例——Table、SQL版本信息Mavan依赖自定义SourceFunctionTableAPI、SQL 简单示例TableAPI、SQL 窗口聚合示例Flink示例——Table、SQL版本信息产品版本Flink1.7.2Java1.8.0_231Scala2.11.12Mavan依赖pom.xml 依赖部分<dep...原创 2020-02-12 18:07:20 · 1065 阅读 · 0 评论 -
Flink示例——State、Checkpoint、Savepoint
文章目录Flink示例——State、Checkpoint、Savepoint版本信息状态后端 State Backend (管理State、Checkpoint)State 示例CheckpointSavepointFlink示例——State、Checkpoint、Savepoint版本信息产品版本Flink1.7.2Java1.8.0_231Scal...原创 2020-02-11 22:48:17 · 1075 阅读 · 0 评论 -
Flink示例——Window、EventTime、WaterMark
文章目录Flink示例——Window、EventTime、WaterMark版本信息自定义SourceFunctionWindow 示例EventTime、WaterMarkFlink示例——Window、EventTime、WaterMark版本信息产品版本Flink1.7.2Java1.8.0_231Scala2.11.12自定义Source...原创 2020-02-10 21:51:50 · 756 阅读 · 0 评论 -
Flink示例——Connect、CoMapFunction、Split、Select
文章目录Flink示例——Connect、CoMapFunction、Split、Select版本信息自定义SourceFunctionConnect、CoMapFunction 示例Split、Select 示例Flink示例——Connect、CoMapFunction、Split、Select版本信息产品版本Flink1.7.2Java1.8.0_231...原创 2020-02-10 14:50:03 · 1769 阅读 · 0 评论 -
Flink示例——Sink
文章目录Flink示例——Sink版本信息自定义SourceFunctionPrint Sink 示例Kafka Sink 示例ElasticSearch Sink 示例Redis Sink 示例自定义 Sink 示例 (JDBC)Flink示例——Sink版本信息产品版本Flink1.7.2Java1.8.0_231Scala2.11.12自定义...原创 2020-02-10 14:29:01 · 1063 阅读 · 0 评论 -
Flink示例——Source
文章目录Flink示例——Source版本信息Collection/Elements Source 示例Text Source 示例Socket Source 示例Kafka Source 示例自定义 Source 示例Flink示例——Source版本信息产品版本Flink1.7.2Java1.8.0_231Scala2.11.12Collect...原创 2020-02-10 14:11:40 · 1252 阅读 · 0 评论