- 博客(3)
- 资源 (1)
- 收藏
- 关注
RSS订阅原创 Hive sql切换Flink sql常见问题汇总
Flink SQL 与Hive SQL语法存在差异，虽然Flink SQL提供了Hive SQL的方言解析器，但是还有部分坑存在，如下是设置了Hive方言解析器时依旧存在的问题。###开启hive方言解析器set table.sql-dialect=true###DDLcreate tableSTORED AS ORC一定要大写，否则创建的hive表依旧非orc格式。分隔符属性要加BY，否则不生效。默认行列分隔符是\U0001 和 \ncreate table test(enname STR
2022-09-09 16:47:22
1013
1
原创 Flink任务中的checkpoing与savepoint相关问题
##一、报错：checkpoint 正常，savepoint不可做问题：flink-conf.yaml中缺少相应的配置解决方案：在flink-conf.yaml中增加配置 state.backend: filesystem##二、报错：java.util.concurrent.TimeoutException问题：checkpoint正常，savepoint失败解决方案：造成问题很多，此处解决flink sql中的参数配置问题 －yD “high-availabilty”="NONE"导致fl
2022-08-17 16:24:53
1849
原创 Flink读写kafka表报错集锦
##一、报错字段：RowTime field should not be null, please convert it to a non-null long value.原因：DDL里面的字段名称和kafka传过来的json中的key名称没有对应上（注意时间戳处理函数是否可用（是否除以1000），官网不一定准确，可以测试一下，会导致字段不匹配）。解决方案：认真检查DDL中字段，字段没有问题，考虑怀疑有关的函数使用，确保和kafka中的json的key名称一致。##二、报错字段：KeeperErr
2022-08-17 16:14:59
1560
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人