flink的Restartstrages重启策略让你的程序更加健壮
意义
env.setRestartStrategy函数的意思是重启策略,当然这个函数并不是真正的让你的程序重启,反而是为了让你的程序避免重启,当我们在程序里设置了只接接受int类型的数据,我们偏偏给他传入一个double类型的数据,孱弱的程序会瞬间以内无法解析而废掉,但是我们在程序当中传入了.setRestartStrategy函数并传入参数,你的程序就不会废掉了,而是在不耽误干活的前提下给你汇报一下错误而已,这样避免了数据因为报错中断而丢失数据!从而让你的程序更加的健壮!
步骤
1.在程序中设置一个检查站(重启策略的必要前提)传入参数为5秒!就是说5秒钟检修查一次
env.enableCheckpointing(5000);
2.设置重启的次数和延迟时间
env.setRestartStrategy(RestartStrategies.fixedDelayRestart(3,5000));
代码实现
public class Restartstrages {
public static void main(String[] args) throws Exception {
StreamExecutionEnvironment env = StreamExecutionEnvironment.getExecutionEnvironment();
DataStreamSource<String> lines = env.socketTextStream("localhost", 8888);
//设置一个检查站(重启策略的必要前提)
env.enableCheckpointing(5000);
//设置重启的
env.setRestartStrategy(RestartStrategies.fixedDelayRestart(3,5000));
//写java程序 第二种方式使用整合匿名实现类
SingleOutputStreamOperator<Tuple2<String, Integer>> sandone = lines.map(new MapFunction<String, Tuple2<String, Integer>>() {
@Override
public Tuple2<String, Integer> map(String s) throws Exception {
//当你传入shizijun的时候会让1/0就会报错!我们故意让他报错看看会不会中断程序!
if (s.equals("shizijun")) {
int i = 1 / 0;
}
return Tuple2.of(s, 1);
}
});
KeyedStream<Tuple2<String, Integer>, Tuple> keyedStream = sandone.keyBy(0);
SingleOutputStreamOperator<Tuple2<String, Integer>> summed = keyedStream.sum(1);
summed.print();
env.execute("wordcount");
当8888端口传入:
shizijun
打印台:
报错但是不会中断程序!
}
}