kafka
fyl005
这个作者很懒,什么都没留下…
展开
-
flinksql 中使用 处理时间时, 时区差八个小时的问题 (在 flink 1.13 以后不会在出现时区问题了)
使用事件时间进行开窗时,需要事件进行触发,比如开一个小时的窗口,在 2:15 分有数据过来,下一条数据在 3:15 分到达,那么窗口将会在 3:15 触发计算,输出 2:00 - 3:00 这个时间段内的统计数据,create_time 也是 3:15。很明显这种情况与实际不同。原创 2022-11-17 18:51:25 · 4321 阅读 · 1 评论 -
Flink SQL中的Map、Array、Row
1、kafka中样例数据。原创 2022-11-09 20:18:33 · 2249 阅读 · 1 评论 -
flinksql 监控kafka topic 是否发数据过来
当有数据到来时,会有报错信息,从报错信息中可以看到 topic 中的数据格式。原创 2022-08-29 10:59:16 · 958 阅读 · 3 评论 -
flink sql 读取 kafka 数据写入 Hbase中
版本说明:flink 1.12 、Hbase 1.41、查询 flink 1.12 的官网,找寻flink sql 连接 Hbase 的信息。Apache Flink 1.12 Documentation: HBase SQL Connector根据 Hbase 版本需要下载依赖官网中的连接信息-- register the HBase table 'mytable' in Flink SQLCREATE TABLE hTable ( rowkey I...原创 2022-03-30 10:33:59 · 2064 阅读 · 0 评论 -
fink sql 读取 kafka 的数据写到 kafka
版本: flink 1.12 平台:streamX-- sourceCREATE TABLE `stg_access_its_rt_kafka` ( `message` STRING COMMENT '表数据', `table_name` STRING COMMENT '表名', `record_time` STRING COMMENT '时间yyyy-MM-dd HH:mm:ss', `ts` TIMESTAMP(3) METADATA FR..原创 2022-03-29 10:09:44 · 1604 阅读 · 0 评论