flink
文章平均质量分 72
小雾最秀
这个作者很懒,什么都没留下…
展开
-
Flink Kafka Sink 源码分析
flink kafka sink 源码原创 2022-09-21 16:49:08 · 2999 阅读 · 1 评论 -
记录Flink广播里状态恢复问题
Flink原创 2021-11-26 15:31:26 · 459 阅读 · 0 评论 -
Flink Sql DDL创建kafka avro格式问题 (Caused by: java.lang.ArrayIndexOutOfBoundsException: 14 Flink avro)
按照官网给出模板进行搭建 创表 create table dwd_pv_realtime( ip STRING , uid STRING , oid STRING , `day` STRING ) with( 'connector'='kafka', 'topic'='flink_test', 'properties.bootstrap.servers'='x', 'properties.group.id'...原创 2021-03-19 17:27:40 · 7853 阅读 · 8 评论 -
Flink Table/Sql 流表转换
表到流的转换动态表可以像普通数据表一样通过insert, update, delete来不断进行修改。 它可能是只有一行, 不断更新表,也可能是一个insert-only的表, 没有update和delete修改, 或者介于两者之间的其他表。在镜动态表转换为流或将其写入外部系统时,需要将这些更改进行编码。 Flink的Table APIhe sql支持 三种方式来编码一个动态表的变化:Append-onlay流: 仅通过insert 操作修改的动态表可以通过输出插入的行转换为流...翻译 2020-12-18 11:41:51 · 2522 阅读 · 0 评论 -
toAppendStream doesn‘t support consuming update and delete changes which is produced by node XXX
在Flink sql进行测试输出, 想把 sql查询的结果Table 转为DataStream 然后进行打印当我们table.toAppendStream[Row]的时候 发现报错其实这个因为我们sql 查的那个动态表 是Mysql 这类源, 他们是可以进行update,delete,insert操作的。对于toAppendStream呢 是仅可以将追加流进行转换输出 比如kafka所以我们使用table.toRetractStream[Row].print() 即可 这操.原创 2020-12-17 17:43:22 · 6397 阅读 · 0 评论 -
Flink kafka2kudu启动报错org.apache.flink.configuration.ConfigOptions$OptionBuilder.stringType()Lorg/apa
flink 写kudu任务启动报错。 看报错是因为包冲突的问题。去除本身自带的flink-streaming包即可原创 2020-08-25 15:34:39 · 1120 阅读 · 0 评论