Spark Streaming 1 A Simple Example
Spark streaming是Spark 核心API的一个扩展,它对实时流数据的处理具有可扩展性、高吞吐量、可容错性等特点。我们可以从Kafa、flume、Twitter、ZeroMQ、Kinesis等源获取数据,也可以通过由高阶函数map、reduce、join、window等组成的复杂算法计算出数据。最后,处理后的数据可以推送到文件系统、数据库、实时仪表盘中。事实上,你可以将处理后的数据应用...
原创
2018-05-10 16:05:32 ·
186 阅读 ·
0 评论