sql
文章平均质量分 94
Lara1111
不要打扰我,我在敲代码
展开
-
Flink SQL 1.12 深度实践 一 Kafka source (json+debezium json+复杂json)
# kafka source (simple json+debeizum json+复杂json)近期主要是我花时间一步步采坑实践出来的各种细节,发现官网很多文字和配置都误差. 所以本人本着真实可靠的实践操作来给予大家的文案.希望可以帮到你 . 做实践之前,必须准备flink 环境 略 java 环境 略 sql-client 开启 略 docker 环境. 以备各个组件的快速运行. 一. kaf...原创 2021-02-15 16:06:01 · 6854 阅读 · 0 评论 -
Flink SQL1.12 FlieSystem
四.Filesystem4.1 flink sql4.1.1 kafka的数据写入往hive的外表分区CREATE TABLE kafka_table ( user_id STRING, order_amount DOUBLE, ts BIGINT, `proctime` AS PROCTIME(), -- 通过计算列产生一个处理时间列 `eventTime` AS TO_TIMESTAMP(FROM_UNIXTIME(ts, 'yyyy-MM-d.原创 2021-02-15 22:30:00 · 541 阅读 · 0 评论 -
Flink SQL1.12 三 Hive 内表和外表读写
目录3.1 hive3.1.1 flink sql3.1.2 数据源准备3.1.3sql-client3.1.4 代码3.1.5 采坑3.1.6 配置 (点击参考)3.1.7 hive的demo(点击参考)******这里解释几个对于hive 数据访问比较关键的点.***HiveCatalog 的作用***hive的兼容表和非兼容表 is_generic=true***Dialect的作用SET table.sql-dialect=hive;...原创 2021-02-15 22:08:52 · 1822 阅读 · 0 评论 -
Flink SQL1.12 二 Mysql Source
目录二. mysql 数据源2.1 mysql 全量缓存的方式2.1.1 flink sql2.1.2 数据准备2.1.3 sql-client2.1.4 代码2.1.5 采坑2.1.6 强调配置2.2 flink- cdc-mysql 增量同步更新的方式2.2.1flink sql2.2.2 准备数据2.2.3 sql client2.2.5 采坑2.2.6 配置二. mysql 数据源2.1 mysql 全量缓存的方式2.1...原创 2021-02-15 21:32:04 · 1175 阅读 · 0 评论