- 博客(3)
- 收藏
- 关注
RSS订阅原创 dinky-0.7.3安装部署及采坑记录
修改提交 FlinkSQL 的 Jar 文件路径为6.1中hdfs上的dinky jar包路径。解决方法：修改源码，处理长度超过38的DecimalType，转为VarCharType。主要是由于dinky进行mysql连接时，url没有加上useSSL=false。修改flink lib 路径为6.2中hdfs的flink jar包路径。启动后，默认端口为8888，默认用户名/密码：admin/admin。解决方法：修改源码，在url上添加ssl等参数。本文未提到的说明，可至官网查看。
2023-10-11 16:10:02
1235
原创 记录flink-mysql-connector 全量读取表Split Chunk过程
generateSplits方法，获取chunkKeyColumn，用于根据chunkKeyColumn进行splitsplitTableIntoChunks方法，根据chunkKeyColumn列查询此列最大、最小值2.1 若最大、最小值一致，则返回单一chunk2.2 获取chunkSize、distributionFactorUpper、distributionFactorLower，用于后续split大小，及判断表分布是否均匀。
2023-07-21 14:23:58
705
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人