- 博客(9)
- 资源 (4)
- 收藏
- 关注
RSS订阅原创 Could not initialize keyed state backend--Flink恢复失败
Flink从checkpoint中恢复时候出现如下错误 Could not initialize keyed state backendMap (5/5)Timestamp: 2019-03-26, 13:41:53 Location: hd6:41889java.lang.IllegalStateException: Could not initialize keyed state bac...
2019-03-26 14:43:56
1198
转载 Flink常见的关键技术与特性详解
转载：http://bigdata.51cto.com/art/201702/531036.htm Flink常见的关键技术与特性详解 Flink项目是大数据处理领域最近冉冉升起的一颗新星，其不同于其他大数据项目的诸多特性吸引了越来越多的人关注Flink项目。本文将深入分析Flink一些关键的技术与特性，希望能够帮助读者对Fli...
2019-03-26 00:22:50
459
转载 为什么有人的人生跟开了挂一样？
转载知乎：《为什么有人的人生跟开了挂一样》知乎超10000赞文章！为什么有人的人生跟开了挂一样？Aug.25灼见（微信号：penetratingview)作者丨另维来源丨另维和Yellow01活到这个年纪，最该自己做决定的事都被爸妈决定了发小离婚了，27岁。我们陪他撸串喝酒。他衬衫不合身，大肚便便，头皮屑若隐若现，已经有了油腻中年的征兆。不仔细看，真看不出他是个五官精致，瘦下...
2019-03-25 00:17:37
844
原创 postgresql数据库表的备份与还原
postgresql数据库表的备份与还原备份pg_dump -U postgres -t shipping_shiptype_to_country -f ./shipping_shiptype_to_country.sql futures_data恢复 psql -U postgres -d futures_data_online -f ./shipping_shiptype_to_co...
2019-03-22 11:29:54
3022
原创 Flink检查点失败问题-汇总
flink从检查点中恢复的问题从检查点恢复的时候，命令 ./flink run -s hdfs://192.xxx.xxx.xx:port/data1/flink/checkpoint1 -c com.mymain.MyTestMain报出以下错误：java.util.concurrent.CompletionException: org.apache.flink.util.FlinkExc...
2019-03-21 23:49:41
12124
原创 flink检查点checkpoint失败问题总结-2
检查点checkpoint失败问题总结(2)：问题描述：检查点刚开始是可以的做checkpoint的，后期越来越不能够做checkpoint的情况总结：一.反压问题1.什么是反压(如下图1所示)？图2-1 部分算子反压表现（web ui）2.flink中反压机制是干什么的？ flink中的反压机制是flink中由于个别算子接收receive数据的速度远大于处理完成数据的速度...
2019-03-21 15:08:53
11422
3
原创 算法:不同税率计算的个税问题
算法：不同税率计算的个税问题1.一直银行利率，低于1000元，不用交税，超过的部分按照如下规则缴费.例如1750元工资需要缴纳个人所得税是：taxes = 1000 * 0% + 500* 1% + 250 * 2%；或者若为2750元工资时候，taxes = 1000 * 0% + 500* 1% +500 * 2% + 500* 3%+250* 3%；输入：工资额输出：需要缴...
2019-03-09 00:29:25
568
原创 Flink日志输出查看方式
在网上查看flink日志查看方式，竟然查询不到，因此写下这篇文章，给有此困惑的小盆友们，也给自己做个总结！前情提要：我是通过flink web ui提交的flink任务的，因此通过flink ui查看自身控制台打印输出的。第一步：打开flink的Dashboard看到TaskManager的控制面板之后，点击右侧的具体job所在的taskManager主机进入如下界面，点迹Stdou...
2019-03-08 10:28:52
39519
18
原创 flink-on-yarn解读
相关参考资料： https://blog.csdn.net/wangweislk/article/details/79081769 【好文欣赏】在安装和flink相关包的机器上执行如下命令 (此处已经配置好flink环境变量)：1.使用yarn-session启动相应的容器资源，初始化一个flink集群HADOOP_HOME=/hadoop/hadoop-2.7.2/ HADOOP_C...
2019-03-04 15:57:06
430
kafka+flume+kafka中问题.pdf
2019-07-12
aws-general.pdf
2019-07-12
Spark基本原理与设计思想
2018-10-20
下一代消息中间件--pulsar
2018-10-20
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人