流式计算
Jonathan-Wei
hadoop开发,storm实时计算开发;
展开
-
大数据生态圈之流式数据处理框架选择(Storm VS Kafka Streams VS Spark Streaming VS Flink VS Samza)
微信公众号(SZBigdata-Club):后续博客的文档都会转到微信公众号中。 1、公众号会持续给大家推送技术文档、学习视频、技术书籍、数据集等。 2、接受大家投稿支持。 3、对于各公司hr招聘的,可以私下联系我,把招聘信息发给我我会在公众号中进行推送。 技术交流群:59701880 深圳广州hadoop好友会 随着新设备,传感器和技术的出现,数据增长率在不断加速,根据...原创 2018-11-08 17:09:48 · 2284 阅读 · 0 评论 -
Apache Flink本地模式部署
Apache Flink部署模式有好几种,本文主要介绍Apache Flink的本地部署模式。本地部署模式主要用于开发者程序调试测试使用。先决条件运行系统:系统方面没有过多要求,Linux、Mac、Windows均可Java 1.8.x以上,Apache Flink不支持1.8.x以下的版本。检查系统的Java版本$ java -versionjava version "1.8...原创 2018-12-12 21:28:30 · 3274 阅读 · 0 评论 -
Flink源码解析 | 从Example出发:理解Flink启动流程
从《Apache Flink本地部署》这篇文章中可以看到,我们启动集群都是通过脚本start-cluster.sh开始执行。我们的源码解析之路就从flink的bash脚本入手。start-cluster.shbin=`dirname "$0"`bin=`cd "$bin"; pwd`. "$bin"/config.sh# Start the JobManager instance...原创 2018-12-12 21:35:16 · 2243 阅读 · 0 评论