- 博客(11)
- 问答 (1)
- 收藏
- 关注
RSS订阅原创 Flink1.6、flink1.7的checkpoint想管配置及说明（会随时补充）
/ 允许失败的检查点的最大次数，我设置了integer最大值（这并不合理，但我还是用了，你随意）// 同时存在的正在进行的检查点的个数：1，个人理解：设置了最小间隔也能达到此效果。barrier非对齐策略。不到3分钟则还是用barrier对齐策略，即此配置不生效。// 两个检查点直接最小间隔，注意和第一步设置的时间意义是不一样的。// 设置程序停止后检查点是否删除：不删除。// 开启一个每5分钟一次的检查点，并设置精准一次模式。// 检查点超时时间10分钟。// 超过3分钟才会用。barrier非对齐。
2023-09-04 11:19:44
150
原创 flink 连接hive（Java版）
// TODO 创建流式表环境 EnvironmentSettings settings = EnvironmentSettings.newInstance().useBlinkPlanner().inBatchMode().build(); TableEnvironment tableEnv = TableEnvironment.create(settings); String name = "myhive"; String def...
2022-04-19 14:31:23
3179
2
原创 flink自定义Sink到HDFS
public class HdfsSourceAndSink { public static void main(String[] args) throws Exception { StreamExecutionEnvironment env = StreamExecutionEnvironment.getExecutionEnvironment(); env.setParallelism(1); // TODO 读取hdfs Da.
2022-04-13 17:33:07
1237
2
原创 flink通过JDBC连接MySQL
注意：1、?serverTimezone=UTC 如果没有时区问题可以不加； 2、.setRowTypeInfo(new RowTypeInfo(BasicTypeInfo.INT_TYPE_INFO))这个是根据表中字段确定的
2022-04-13 16:47:27
1964
1
原创 flink通过JDBC连接Oracle
StreamExecutionEnvironment env = StreamExecutionEnvironment.getExecutionEnvironment(); StreamTableEnvironment tableEnv = StreamTableEnvironment.create(env); DataStreamSource<Row> input = env.createInput(JDBCInputFormat.buildJDBCInputFormat() .
2022-04-13 16:24:04
3788
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人