![](https://img-blog.csdnimg.cn/20201014180756928.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
BigDate
文章平均质量分 91
GreenLanternWine
这个作者很懒,什么都没留下…
展开
-
kafka 详细入门指南
kafka 详细入门指南 避免浪费时间 == > 本篇定义Kafka 安装及入门实操,不涉及原理,后续会另一篇详解 kafka标签 开源的消息系统,scala和java是实现的 kafka最初由LinkedIn开发,2012年10月Apache Incubator毕业 一个分布式的消息队列,按照topic进行分类,利用producer进行发送消息,Consumer来进行消费接收.一个k...原创 2018-11-12 19:51:22 · 409 阅读 · 0 评论 -
基于源码的SparkContext初始化动作解析
基于源码的SparkContext初始化动作解析 话不多说,首先附上,总体概览图(这个是spark2.10版本)新版本已经没有SparkDesploySchedulerBackend这个类了。 引入 刚刚接触到Spark的小伙伴,最开始一定会碰到写WordCount程序,或者一些自己的小Demo,每次写的时候都像套模板一样,之前一定要new SparkConf 然后把conf 传给SparkCo...原创 2018-11-22 13:56:51 · 171 阅读 · 0 评论