![](https://img-blog.csdnimg.cn/20201014180756925.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
spark
Dino系我
喔~~~
展开
-
重新编译spark 增加spark-sql适配CDH
spark-sql原创 2015-12-19 16:15:47 · 9284 阅读 · 9 评论 -
spark读取kafka数据 createStream和createDirectStream的区别
spark读取kafka数据 createStream和createDirectStream的区别原创 2016-03-06 16:43:34 · 21619 阅读 · 1 评论 -
kafka->spark->streaming->mysql(scala)实时数据处理示例
kafka->spark->streaming->mysql(scala)实时数据处理示例原创 2016-03-06 16:34:01 · 19473 阅读 · 6 评论 -
flume-kafka- spark streaming(pyspark) - redis 实时日志收集实时计算
鉴于实在是比较少python相关是spark streaming的例子,对于自己实现的测试例子分享上来一起讨论。强烈建议scala去写spark streaming程序,python资料太少,翻遍github也才发现几份代码原创 2016-02-23 11:20:09 · 11466 阅读 · 2 评论 -
spark rdd转dataframe 写入mysql的示例
spark原创 2016-03-11 14:11:39 · 18967 阅读 · 1 评论