- 博客(2)
- 资源 (1)
- 收藏
- 关注
转载 Spark的运行架构
转自:http://blog.csdn.net/gamer_gyt/article/details/51822765 只保存了部分内容方便查阅,完整的点击链接查看 1:Spark的运行模式 2:Spark中的一些名词解释 3:Spark的运行基本流程 4:RDD的运行基本流程 一:Spark的运行模式 Spark的运行模式多种多样,
2017-09-12 20:06:06 700
转载 spark createDirectStream保存kafka offset(JAVA实现)
转自:http://blog.csdn.net/xueba207/article/details/50381821 保存起来便于查阅 问题描述 最近使用spark streaming处理kafka的数据,业务数据量比较大,就使用了kafkaUtils的createDirectStream()方式,此方法直接从kafka的broker的分区中读取数据,跳过了zookeeper,
2017-09-12 19:50:32 384
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人