![](https://img-blog.csdnimg.cn/20201014180756738.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Flink
文章平均质量分 77
梦痕长情
这个作者很懒,什么都没留下…
展开
-
FlinkCDC之初体验
查看指定binlog文件的内容。变动(包括数据或数据表的插入 、 更新 以及 删除等),将这些变更按发生的顺序完整记录下。#只查看第一个binlog文件的内容。在/var/mysql下可以看到mysql-bin.index的文件(一般)#查看当前正在写入的binlog文件。没插入数据之前,mysql-bin.000001的位置是在695.更新前和更新后的数据。我的是在/data/mysql/mysql-bin。原创 2023-05-04 15:50:12 · 785 阅读 · 0 评论 -
Centos7单机部署Flink13.6及测试FinkCDC同步MySQL
但是升级版本是个大工程,要编译、要parcel制作工具,而且是生产环境的升级,没办法因为要测试FlinkCDC,所以只能搭建个单机测试,等后面生产环境升级后再迁移;原因:flink部署到集群上,standalone模式,需要指定TaskManager主机的地址:修改flink-conf.yaml配置并添加配置 taskmanager.host: localhost。打开${flink}/conf/flink-conf.yaml文件,修改一下信息。发现无法打开,原因是防火墙未关闭,联系运维开放8081端口。原创 2023-05-19 18:42:52 · 1365 阅读 · 1 评论 -
FlinkCDC之DataStream的反序列自定义
1、封装成JSON对象。反序列:CustomDebeziumDeserializationSchema。2.自定义反序列:CustomerDeserializationSchema。封装成JSON对象。3.自定义反序列3:CustomerDeserialization,封装成String。一、FlinkDataStream的优缺点就不做过多的累赘了。先来看三个简单的反序列例子吧,测试以MySQL数据源为主。自定义反序列的好处就是得到自己想要的数据格式。2.1 输出的数据格式。原创 2023-05-17 09:58:54 · 303 阅读 · 0 评论 -
Flink批流一体API(Sink示例)【转载】
转载:Flink批流一体化API翻译 2022-09-06 09:03:19 · 159 阅读 · 0 评论 -
Flink Sink JDBC 源码分析【转载】
转载 Flink Sink JDBC转载 2022-09-06 08:42:11 · 1107 阅读 · 0 评论