fct2001140269的博客

如今你的气质里,藏着你走过的路,读过的书和爱过的人。” ——《卡萨布兰卡》...

Could not initialize keyed state backend--Flink恢复失败

Flink从checkpoint中恢复时候出现如下错误 Could not initialize keyed state backend Map (5/5) Timestamp: 2019-03-26, 13:41:53 Location: hd6:41889 java.lang.IllegalS...

2019-03-26 14:43:56

阅读数 61

评论数 0

Flink常见的关键技术与特性详解

转载:http://bigdata.51cto.com/art/201702/531036.htm Flink常见的关键技术与特性详解 Flink项目是大数据处理领域最近冉冉升起的一颗新星,其不同于其他大数据项目的诸多特性吸引了...

2019-03-26 00:22:50

阅读数 81

评论数 0

为什么有人的人生跟开了挂一样?

转载知乎:《为什么有人的人生跟开了挂一样》 知乎超10000赞文章!为什么有人的人生跟开了挂一样? Aug.25 灼见(微信号:penetratingview) 作者丨另维 来源丨另维和Yellow 01 活到这个年纪, 最该自己做决定的事都被爸妈决定了 发小离婚了,27岁。 我们陪他撸串喝酒。 ...

2019-03-25 00:17:37

阅读数 326

评论数 0

postgresql数据库表的备份与还原

postgresql数据库表的备份与还原 备份 pg_dump -U postgres -t shipping_shiptype_to_country -f ./shipping_shiptype_to_country.sql futures_data 恢复 psql -U postgres ...

2019-03-22 11:29:54

阅读数 49

评论数 0

Flink检查点失败问题-汇总

flink从检查点中恢复的问题 从检查点恢复的时候,命令 ./flink run -s hdfs://192.xxx.xxx.xx:port/data1/flink/checkpoint1 -c com.mymain.MyTestMain 报出以下错误: java.util.concurre...

2019-03-21 23:49:41

阅读数 956

评论数 0

flink检查点checkpoint失败问题总结-2

检查点checkpoint失败问题总结(2): 问题描述:检查点刚开始是可以的做checkpoint的,后期越来越不能够做checkpoint的情况总结: 一.反压问题 1.什么是反压(如下图1所示)? 图2-1 部分算子反压表现(web ui) 2.flink中反压机制是干什么的? ​ ...

2019-03-21 15:08:53

阅读数 430

评论数 1

算法:不同税率计算的个税问题

算法:不同税率计算的个税问题 1.一直银行利率,低于1000元,不用交税,超过的部分按照如下规则缴费.例如1750元工资需要缴纳个人所得税是: taxes = 1000 * 0% + 500* 1% + 250 * 2%; 或者 若为2750元工资时候, taxes = 1000 ...

2019-03-09 00:29:25

阅读数 69

评论数 0

Flink日志输出查看方式

在网上查看flink日志查看方式,竟然查询不到,因此写下这篇文章,给有此困惑的小盆友们,也给自己做个总结! 前情提要: 我是通过flink web ui提交的flink任务的,因此通过flink ui查看自身控制台打印输出的。 第一步:打开flink的Dashboard 看到TaskManag...

2019-03-08 10:28:52

阅读数 2092

评论数 0

flink-on-yarn解读

相关参考资料: https://blog.csdn.net/wangweislk/article/details/79081769 【好文欣赏】 在安装和flink相关包的机器上执行如下命令 (此处已经配置好flink环境变量): 1.使用yarn-session启动相应的容器资源,初始化一个f...

2019-03-04 15:57:06

阅读数 109

评论数 0

提示
确定要删除当前文章?
取消 删除
关闭
关闭