- 博客(4)
- 资源 (14)
- 问答 (1)
- 收藏
- 关注
RSS订阅原创 Flink Checkpoints & Savepoint 最佳实践
文章目录基本概念代码实践测试恢复总结基本概念Flink 中很重要的一点就是能够保持任务的状态，这样任务失败了，会根据上一次的结果重试，保证数据只被计算一次实现原理，就是每隔一点时间对计算状态作一个镜像，这个状态称为Checkpointssavepoint 主要是人为的触发，保存这个任务的计算状态 ，两个作用都是一样的代码实践/** * Created by shuiyu lei...
2019-07-11 21:45:40
545
1
原创 Flink on yarn 实践
目录环境配置启动常见报错参考资料环境配置yarn环境可用flink-shaded-hadoop-2-uber-2.7.5-7.0.jar 复制到lib目录下启动Flink启动直接提交到yarn上 启动命令bin/flink run -m yarn-cluster xx.jar // -c 可以指定启动类另一种方式在yarn上开辟一个空间，然后在提交这种任务，可以...
2019-07-11 21:00:51
475
原创 Influxdb+Grafana打造Flink监控大盘
Influxdb+Grafana打造Flink监控大盘Influxdb安装Grafana安装Flink配置Grafana配置报表Influxdb安装为什么选influxdb，每条记录都有一个时间戳，很适合这种统计的场景，当然还有其它原因安装参考文档注意事项 ,如果要在界面打开查询界面需修改配置 /etc/influxdb/influxdb.conf[admin] # Deter...
2019-07-07 18:07:54
5057
1
原创 Flink 调试watermark & allowedLateness
调试watermark & allowedLateness基本概念能明白什么开始调试总结基本概念watermark 主要是为了解决数据乱序到达的问题allowed 解决窗口触发后数据迟到后的问题能明白什么窗口的范围窗口的触发条件窗口的销毁时间迟到元素的处理方式watermark的生成方式开始调试代码准备 Flinkpackage com.wend...
2019-07-07 17:05:56
1583
javax.mail.jar
2016-06-25
commons-email-1.3.jar_mail.jar_activation.jar
2016-06-22
hadoop中找不到jobtracker的源码
2017-06-13
TA创建的收藏夹 TA关注的收藏夹
TA关注的人